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《应 用 随机 过 程 》 一 书 是 作者 多 年 来 累积 该 学 科 的 教学 与 研究 的 经 验 后 
编著 而 成 的 一 本 研究 生 教 材 。 

本 教材 力求 强调 以 下 诸 点 : 

1. 着 眼 于 引发 兴趣 ， 使 读者 领悟 其 思想 ， 感 受 其 魅力 与 威力 。 

2. 着 重 于 揭示 概念 的 来 源 及 篆 景 ， 典 型 随机 模型 的 提炼 、 特 性 刻 划 和 它们 
的 应 用 以 及 发 展 的 踪迹 。 

3. 主要 用 概率 的 观点 与 方法 研究 与 领略 若干 最 基本 的 但 至 今 仍 有 了 旺 气 与 
潜力 的 随机 过 程 的 主要 特征 与 风采 。 

4. 将 条 件数 学 期 望 作为 现代 随机 过 程 的 最 基本 的 概念 之 一 ， 并 力求 用 初 
等 的 便于 直观 确切 理解 的 方法 描述 它 的 定义 与 重要 性 质 。 由 于 现代 随机 过 程 
及 其 应 用 领域 常常 更 关心 的 是 许多 不 同时 刻 随 机 变量 之 间 的 各 种 关系 ， 而 条 
件数 学 期 望 是 刻 划 不 同 随机 变量 之 间 各 种 关系 的 最 佳 工 具 。 因 此 随 着 现代 科 
技 的 迅 猛 发 展 ， 条 件数 学 期 望 将 在 其 中 发 挥 念 来 念 重要 的 作用 。 本 教材 力求 对 
这 种 发 展 趋势 予以 及 时 的 反映 。 

5. 对 若干 发 展 特别 迅速 ， 应 用 僵 来 愈 广泛 的 分 支 ， 如 鞭 ， Brown 运动 与 1t6 
随机 积分 ， 及 点 过 程 等 予以 初步 的 介绍 。 

6. 突出 全 概率 公式 (及 其 推广 与 各 种 变形 ) 中 所 剖 含 的 基本 思想 与 技巧 
把 它 作 为 贯穿 本 教材 的 主导 线索 之 一 ， 并 加 以 阅 明 和 应 用 。 

7. 反映 了 若干 新 成 果 ， 可 以 作为 教学 与 科研 相 结 合 的 切入 点 。 

本 书 是 应 用 随机 过 程 的 入 门 教 材 ， 仅 以 初等 概率 论 及 高 等 数学 、 线 性 代数 
作为 基础 ， 适用 于 重点 大 学 研究 生 及 高 班 本 科 生 的 必修 课 ， 亦 可 作为 一 般 院 校 
研究 生 ， 本 科 生 以 及 工程 管理 人 员 的 参考 书 。 
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第 一 章 ”预备 知识 与 随机 过 程 的 基本 概念 


$ 1.1 概率 


概率 论 的 一 个 基本 概念 是 随机 试验 ， 一 个 试验 (或 观察 ), 若 它 的 结果 预先 无 法 
确定 ， 则 称 之 为 随机 试验 , 简称 为 试验 (experiment). 所 有 试验 的 可 能 结果 组 成 的 集 
合 ， 称 为 样本 空间 , 记 作 Q. 9 中 的 元 素 则 称 为 样本 点 , 用 w 表示 , 由 Q 的 某 些 样 本 
点 构成 的 子 集合 ， 常 用 大 写字 母 4, B,C 等 表示 ， 由 9 中 的 若干 子 集 构成 的 集合 称 
为 集 类 ， 用 花 写字 母 A, 8, 开 等 表示 。 

由 于 并 不 是 在 所 有 的 9 的 子 集 上 都 能 方便 地 定义 概率 ， 一 般 我 们 只 限制 在 满足 
一 定 条 件 的 集 类 上 研究 松 率 性 质 ， 为 此 我 们 引入 = 域 的 概念 : 

定义 ” 设 三 为 由 Q 的 某 些 子 集 构成 的 非 空 集 类 ， 若 满足 : 

1° Qef; 

2°” 阁 4ef. 则 4sE 厂 ,45 是 4 的 补 集 ,， 即 45=4=Q-4; 

3” 车 4, EfF,neN, 则 UY 4, EF. 

则 称 天 为 o 域 (oc 代数 ). 称 (9Q,F) 为 可 测 空间 . 品 

容易 验证 ， 若 为 = 域 ， 则 丰 对 可 列 次 交 、 并 、 差 等 运算 封闭 ， 即 天 中 的 
任何 元 素 经 可 列 次 运算 后 仍 属于 F， 例 : 集 类 万 = {0}, 五 = {0,4,45,9} 及 
万 ={4:Y4C8O] 均 是 域 ， 但 集 类 .4 = 1{0,4,9} 不 是 域 ， 

通常 我 们 最 关心 的 是 包含 我 们 所 要 研究 对 象 的 最 小 c 域 . 设 4 为 由 Q 的 某 些 子 
集 构成 的 集 类 ， 一 切 包含 4 的 o 域 的 交 ， 记 为 o(.4). 称 o(4) 为 由 A 生成 的 域 ， 
或 称 为 包含 4 的 最 小 = 域 , 例 : 4= {0,4,9}， 则 ol(4) = {0..4,45,Q}. 一 维 Borel 
0 域 : 包含 正 上 所 有 形 如 集合 (-x,a] 的 最 小 o 域 称 为 一 维 Borel o 域 ， 记 为 8, 即 
B=0o((—%,a],va E 正 ). 

定义 ” 设 (9.F) 为 可 测 空间 ， P 是 一 个 定义 在 和 上 的 集 函 数 ， 若 满足 : 

1"” P(4)> 0.v4 ef  ( 非 负 性 ) 

2° P(0)=1:; ( 规 一 性 ) 

3° 若 hiEFi=1,2,.…, 且 4i;4;=0Vij, 有 


iG， 


-> P(L4i)， (可 列 可 加 性 ) 
则 称 P 为 可 测 空间 (Q,.F) 上 的 一 个 概 察 测度 (Probability measure), 简称 概率 (Prob- 
ability). 称 (Q, .了 ) 为 概率 空间 (Probability space). 称 为 事件 域 若 4 ce 二 则 称 
4 为 随机 事件 (random event), 简称 为 事件 , 称 P(4) 为 事件 4 的 概率 ， 
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事件 的 概率 刻画 了 事件 出 现 可 能 性 的 大 小 .概率 的 基本 性 质 如 下 : 
1°” 阁 4cB, 则 P(4)< P(B). 

2° P(A4°)=1- P(A4). 

3 ” 若 41.4?…… ,4 互 不 相 容 ， 则 


n 


P(U 4;) = > P(4;)，”( 有 限 可 加 性 ) 


4” 对 任意 二 个 事件 4 及 B, 有 


人 P(A)+ P(B)— P(AB), 
P(A—-B)= P(A4)— P(AB). 


5 对 任意 A1, A2,.…: ,An 有 


n 


PJ)A4i)=) P(A) > PAAj)+ > P(AiAjAx) 
委 尖 诗 RS 


i<Ij<n i<j<h<n 


ee (—1)°+1P(A1A2... 4,). 
P(\) 4;) < > P(A;) 
. Ces 


例 : 1. [0,1] 上 的 Borel 概率 空间 . 设 Q = [0,1],F = 8[0.1], 即 8[0.1 是 8 局限 
在 [0,1] 上 的 Borel o- 域 。 称 (Q,) = ([0,1],B[0,1]) 为 [0,1] 上 的 Borel 可 测 空 间 . 设 
在 可 测 空间 ([0,1], 8B[0,1]) 上 定义 一 概率 测度 P ， 它 满足 : 当 Y4 = [a, 外 € 810,1] 时 ， 
P(4) = 一 ww 称 (Q, 大 P)= ([0,1],8[0,1], 了 ) 为 [0,1] 上 的 Borel 概率 空间 ， 称 卫 为 [0,1] 
上 的 Borel 概率 测度 . 

2. 令 B = [0,1] 上 有 理 点 全 体 ，B = [0,1] 上 无 理 点 全 体 . 

(1) 试 证 : BEF.BEeF;: 

(2) 用 公理 化 定义 与 性 质 ， 求 证 : P(B)=0,P(B)=1. 

证 明 : va € [0,1], 单 点 集 a = Na.a+ +)eE B[0,1]=F, 而 B=0Uf{2: 
m < n,n.m = {1,2,…}} 是 可 列 单 点 集 的 并 , 故 Be fF. 且 B=[01]-BeEerT. 、 
va € [0,1], P(a) = 0, 由 完全 可 加 性 知 P(B)==0, 而 B=[0,1]-B, 故 P(B)=1-0=1. 
证 毕 . 

概率 的 一 个 重要 性 质 是 它 具 有 连续 性 .为 此 先 引 入 事件 列 的 极限 . 

一 事件 列 {4,,n > 1} 称 为 单调 增 序列 , 知 4。C 4i,41,n > 1: 称 为 单调 减 序列 , 若 
An D 4+172 之 1. 如 果 {hn,n > 1} 是 单调 增 序列 ， 定义 ln hn = U1 4;. 如 果 
{4w.n 之 1} 是 单调 减 序列 ， 定 义 lm 一 < 4» = 门生 1 4 

连续 性 定理 如 下 : 





1.1 概率 


命题 1.1.1 大 {4 > 1} 是 单调 增 序列 (或 减 序列 ), 则 


lim P(A,)= P( 


n=00 i A ) 
证 : 先 设 {4,,n > 1} 为 单调 增 序列 ， 令 


如 = 
n( (J A) = A440 1, n>1 
和 


容易 验证 {Bn,n 1} 互 不 相 容 . 且 有 (jr 二 (i Bi,n > 1 及 Ce A; (Fa: B;, 故 


B1 = 


PUia A) = P(A) = PL Be (公理 3。) 
Sl Pas Sl 
-P= PU 
六 
-PU = Pa) (4 =U 
i=1 i=1 
若 {4,,n > 1} 为 单调 减 序列 ， 则 {45 


5.n > 1 为 单调 增 序列 ， 于 是 
P(U 49) = lim, PU9) 
n=1 














由 
U A ( 门 Mn) 
n= 二 1 斌 二 于 
有 oo 
1-P( 门 4)= lim (1— P(An)), 
珀 守 十 pL 
即 
P(N 4n) = lim P(An). 
弱 产 证 
下 面 是 著名 的 Borel-Cantelli 引 理 . 
命题 1.1.2 设 {An,n > 1} 是 一 事件 序列 ， 若 51P(4i)< cc， 则 
Plimsup 4;) = 0. 
其 中 lim sup,_, ~ 4; < 


去 Ni (J Ai. 
证 : 吻 知 UU 4; 是 关于 的 单调 减 序列 ， 故 由 命题 1.1.1 有 


< PN U = PO UA 





Tin i=n 
cc 3 eel 
A Ss 
i=n 


二 
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命题 1.1.3 若 {4n.n > 1} 是 相互 独立 的 事件 序列 ， 且 有 Dj;-1 P(4n) = x, 则 有 














P( N U De 
证 : 
PN UP 下 Un- 亚 lim PP WE = lim[ll-P MN a 
但 
P(N AF)= II P(AF) (由 独立 性 ) 
=1a-PaysIe (le<e",e20) 
=ep(- PA) = (因为 DP(4) = x 对 所 有 
因此 命题 得 证 . 


$ 1.2 随机 变量 、 分 布 函数 及 数字 特征 


1. 随机 变量 与 分 布 函数 





ee 9, 记 卫 为 实数 全 体 所 成 之 集 ， 随机 变量 定义 为 : 

定义 (9.F,P) 是 一 概率 空间 ， X(w) 是 定义 在 Q 上 的 单 值 实 函数 ， 如 果 对 
YaER, 有 jo : 久 (w) < a} Ee , 则 称 匀 (w) 为 随机 变量 (random variable). 口 

这 里 有 几 点 说 明 ，1lj{fw : 匀 (w) < a} 是 指 所 有 满足 和 (w) < a 的 样本 点 w 的 集合 . 定 
义 要 求 {w : 匀 (w) < a} 是 (8, 开 ,P 了 ) 的 一 个 事件 , 因而 可 定义 它 的 概率 ，2) 定义 中 心 为 日 
变量 , 为 了 书写 方便 , 简 记 {e :X(w) < a={X<a)={XE(-%,q]). 以 下 把 X(w) 记 
为 X. 一 般 随机 变量 符号 用 大 写字 母 X,Y, 2 等 表示 . 3)X(w) 满足 {o :X(w) < a}€ 了 ， 
则 易 证 : VabeE RI{X>al{X<a){X=a{a<X<b{fa<X<b{fa<X< 
b},{a<X<a}le7. 

例 1 若 (0,F) 中 的 三 = {0, 4, 4A¢, Q}. 4E 厂 而 41 9 ,容易 验证 41 的 示 性 函 
数 I4(w) 使 (I4, <<)#. 故 I4,(w) 对 工 而 言 不 满足 随机 变量 的 定义 . 

例 2 给 定 (Q,) , 设 {Bk0< < a Q ee 即 Bi B: = Ok . 
Dri1Br = 人 QQ 有 8 Bi EF0<h< ,定义 天 (w) = D7 ZhIB,(w) , 则 容易 验证 X(w 
是 随机 变量 . 
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可 以 证 明 ， YB € 8,{w,(w) E B} € ,等 价 于 Va Ee 玉 ,{w,X(w) < a} € 大. 参见 
[21,22]. 简 记 关 = X(o), 且 记 和 -1(B) = (w :XX(w)€ B). 随机 变量 简 记 为 1.v. 
设 蕊 为 (0,.F.P) 上 的 随机 变量 ， 对 vz ce 下 


F(z)= P(X <¢2)= P(X €(-%,2)]), 


称 F(z) 为 X 的 分 布 函数 (distribution function). 


若 随机 变量 X 的 可 能 取 值 的 全 体 是 一 可 数 集 或 有 限 集 ， 则 称 X 是 离散 型 随机 
变量 ， 简 记 为 dr.V.. 
对 r.v. 的 分 布 函 数 F(z), 车 存在 一 非 负 函数 f(z), 对 Vz Ee 下 ,有 


F(z)= ya f(u) du, 
则 称 f(z) 为 rv. XX 的 概率 密度 函数 (probability density function, 简 记 为 p.df.). 若 


f(z) 在 z 连续 ， 则 笃 名 = f(z), 即 


Pl(: <z 
lim P(e<X<r+h) = f(z), 
ho0 h 


或 
Pl(z<X<e+h)= f(r)h+o(h). 


以 上 关系 是 以 后 用 所 谓 “ 微 元 法 ” 求 p.df. 的 依据 : 为 求 1.v. X 的 pdf, 先 求 X 
落 在 一 个 小 区 域 (z,z + 川 上 的 概率 P(x < 和 < z+h), 然后 让 h 一 0， 求 其 极限 
lim P(z < 于 之 Zz 十 h)/h, 即 得 f(x). 


二 维 随机 变量 (X,Y) 的 联合 分 布 F(z,y) 定义 为 
F(z,y)= P(X < 2,Y <Yy). 
和 YY 的 边缘 分 布 为 
Fx(z)= P(X < 7)= 0 F(z,y) = F(zr,+o%). 
Fy-(y) = P(Y < y)= si, F(z,Y) = F(t+oc,y). 


车 存在 一 非 负 函数 f(z.y), 对 Vv(z,y)e FR? 有 


reew= 人 f (u,v) dudv, 


则 称 f(z,y) 为 (X,Y) 的 联合 概率 密度 函数 ，( 简 记 j pdf ). 
称 随机 变量 X 与 了 相互 独立 , 若 对 Vv(z,y) ce me, 有 


F(T,y) = Px(r) Fy(y). 
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n 维 随机 向 量 Xi1, Xs,…. ,X; 的 联合 分 布 函数 (joint distribution function) 定义 为 
F(z1, Ta ,Wn) = P(X1 < £1, Ko < to, ,Kn < Tn). 
若 对 V(z1, 22,… ,zn) ER" 有 
F(zi, Ta Wn) = F(T1) Fo (722) F(Tn), 
则 称 了 X1, 了 2,… ,了 相互 独立 (independent). 这 里 
F(zi)= lm cz Wi Tn) = P(X; < oi). 


zj 一 co 天 


2.Riemann 一 Stieltjes 积分 


为 以 后 表示 简便， 这 里 我 们 引出 Riemann 一 Stieltjes 积 
设 F(z) 为 (-sc,+>c) 上 的 单调 不 减 右 连 续 函 数 ， 9(z) 为 (- cc,+>c) 上 的 单 值 实 
函数 ， va <b. 
定义 “” 任 取 分 点 &=zo<z<za< <oil < Zi < wn = DVu € [zz 
作 积分 和 式 < 
> 9Qa)AF(z) = > gu) [F(zi) — F(zi-1)) 
i=1 i=1 


i 
令 入 = maxicicn AZi = maxizci<n(Xi 一 Yi-1), 着 极限 


存在 ， 则 记 
J(a,b) 3S) g(xz) dF (z) &/ g(z)F(dz)), 

称 极限 7(a,5) 为 g(x) 关于 F(z) 在 [a.?] 上 的 R-S 积分 . 口 

注 : (1) 和 一 0 意味 着 n 一 >, 且 最 大 子 区 间 长 度 趋 于 0. (2) 当 取 F(z) = z 时 ， 
R-S 积分 化 为 原来 的 Riemann 积分 ， 所 以 R-S 积分 是 Riemann 积分 的 推广 . 

当 a 一 一 >%,b 一 十 x 时 ， 若 极限 

b 
JJ (一 co, 十 co) = 志 g(Z) dF(z) 


存在 ， 则 称 


TCet+ej= 人 村 ov)aP(n) 6 (或 / Plan 





为 g(z) 关于 F(z) 在 (->x ,+co) 上 的 R-S 积 
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R-S 积分 的 基本 性 质 : 


1 在 a<ci<:…<c,<b 时 


| soldapmj= 叶 人 soldploh (a = co5= enti); 
外 i=0 “<i 
2° 
bn n b 
f Drare=> | gi(z) dF (zs) 
“三 人 


3°” 阁 g(x)>0, 且 a<5, 则 
“gls) dp(s) > 0 
4” 若 甩 (z), 到 (2) 为 二 分 布 函数 ， C1, C2 为 常数 ， C1.C。> 0, 则 
f salcmt) + cm) = 0 f sadn + cs { alo)amle) 


几 个 特例 : 
设 F(z) 为 总 的 分 布 函数 
1°” 着 g(z)=1, 则 
b 
/ dF(z)= F(b))— F(a)= Pla<X<h. 


a 


2" 若 蕊 为 离散 型 随机 变量 ， 即 P(X =6)=pi,iEN = {1,2,…} 则 


2) 三 Dp 


如 


是 一 跳 除 型 分 布 函 数 ， 即 F(x) 的 变化 只 在 c1,c2,… ,这些 点 且 其 茎 度 为 p;, 则 R-S 积 


和， g(z) dF (2) = dye)lF(en +0)—F(cn 一 0)] = Sg(en)p 


n=1 向 二 于 


化 成 了 一 个 级 数 . 


(1). 随机 变量 的 数学 期 望 (Expectation or Mean) 
定义 ” 设 畴 为 rv., F(z) 为 df， lz|dF(z) 存在 ， 则 称 


EX= / zdF(z) 
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为 1.v. 革 的 数学 期 望 或 称 为 六 的 均值 ). 
性 质 1 若 (O07 = 1 2 ,1n) 为 常数 ， (二 和 二 Ts :n) 为 I.V., 则 


E( CiXi) = 》 CBX. 
ws 下 
性 质 2* 设 g(z) 为 z 的 函数 ，Fx(z) 为 X 的 分 布 函 数 ， 若 Blg(X)] 存在 ， 则 
Elg(X)] = {sarxte) 
当 瑟 为 drv. 时 ， 即 P(X = x)= pr.n€EN, 则 


Do 
EX = >》， mnpn 


他 三 工 


即 BX 是 三 所 有 可 能 取 值 的 加 权 平 均 . 
当 蕊 为 连续 型 tr.v. 时 ， 简 记 为 c.r.v., 且 有 p.df. f(x), 则 


ve 
EX= | zf(z£) dz. 


(2). 方差 (Variance) 


定义 令 DX 全 EB(X- BX)? = BX?- (EX)?, 称 DX 为 1.v. 的 方差 有 时 记 
DX = Var = oo). 
DX 刻画 了 X 取 值 的 集中 或 分 散 程度 . 





























(3). 协 方差 (Covariance) 
定义 ”二 个 1r.v. (X,Y 了 ), 称 
Cov (X,Y)S EI(X— EX)(Y ~ EY)] = E(XY)— (EX)(EY) 
为 (X,Y) 的 协 方差 . 口 
我 们 知道 , 若 X,Y 独立 ， 则 E(XY) = 一 XBY 全 Cov(X,Y) = 0. 于 是 , 若 


Cov (X,Y 了 ) 关 0 过 ,了 不 独立 ， 因 此 Cov (X,Y) 冯 0 刻 划 了 X,Y 取 值 存在 某 种 统计 上 


(4). 相关 系数 (Correlation coefficient) 


定义 着 0<DX=0oXi<%,0<DY=o%<x, 称 


Cov (X,Y 
Dae Ci) 
OxXOY 
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为 (X,Y 了 ) 的 相关 系数 . 
p(X, 了 ) 刻 划 了 对,Y 之 间 线 性 关系 的 密切 程度 ， 若 p = 0 称 X,Y 不 相关 ， 


主要 性 质 : 
1 0 
DOO aiXi)= 》 a DXi t+ 2) ,aiajCov (Xi, Xi); 
和 2 i<j 
2” 若 Xi1, 针 9.… ,XX 相互 独立 ， 则 Cov (Xi,Xj) = 0，j 冯 i, 即 X;, 六; 不 相关 ; 
3 “ 若 X1, 2.… , 太 n 两 两 不 相关 ， 则 


D(O Xi) 三 DDX:: 
dl = 
4。” Schwarz 不 等 式 ， 若 rt.v. X,Y 的 二 阶 矩 存在 ， 则 
IE(XY)? < EB(X?). E(Y’); 
特别 是 


[Cov (X,Y)|? < ox oY, 


Ip(X.Y) <L. 





5。 p = +l, 当 且 仅 当 


Y_EY XEX 
P(r -+ 


即 p= 二 1 时 ， (X,Y) 以 概率 1 取 值 在 直线 YY- BY = VDY(X -BX)/VDX 上 . 




















一 上) 








(5). 和 (Moment) 
定义 ” 记 
十 25 
E(X*) = | zdFx (2), (k>1), 
称 B(X) 为 iv. 的 上 阶 给 (keN) 
4. 常用 随机 变量 的 分 布 


离散 型 随机 变量 (dr.v.): 


(1). 二 项 分 布 
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设 0<p<12>1l' 若 蕊 的 分 布 律 为 





了 ( 瑟 = 人 =C (1 一 D *, 0<k<n, 


称 XX 是 参数 为 (n,p) 的 二 项 分 布 (Binomial with parameters (n, p)). 简 记 了 XX ~ B(n,p). 


(2). Poisson 分 布 
设 入 > 0, 若 蕊 的 分 布 律 为 
k 


P(X = 月 = te, k=0,1,2,..., 


称 X 是 参数 为 和 的 Poisson 分 布 (Poisson with parameter 入 ). 简 记 对 ~ P(N). 


(3). 几何 分 布 
设 0<p<1, 阁 XX 的 分 布 律 为 
P(X=K)=(1— pp, k=1,2,.., 
称 X 是 参数 为 p 的 几何 分 布 (Geometric distripution). 简 记 X ~ G(p) 
具有 概率 密度 的 随机 变量 : 
(4). 均匀 分 布 


设 和 < 六 若 碟 的 p.d4f 为 


f(g) si a<zr<h, 
Me 
0 其它 . 





称 基 是 (a.5) 上 的 均匀 分 布 (Uniform over (a,5)). 简 记 计 ~ UV(a,0). 


(5). 正 态 分 布 


设 1ER,o>0, 若 于 的 p.df. 为 





f(z)= exp{ 一 (2 一 10)2/2a2}， 


称 了 是 参数 为 (pc2) 的 正 态 分 布 (normal with meters (4.07)). 简 记 了 ~ N(p,o7). 


(6). 指数 分 布 


1.3 ”和 矩 母 函数 、 特 征 函 数 和 拉 氏 变换 


设 入 >0, 若 卫 的 p.df. 为 


称 和 是 参数 为 和 的 指数 分 布 (Exponential with parameter 入 ). 简 记 XX ~ BE(). 


5. 连续 型 随机 变量 的 事件 示 性 函数 的 线性 组 合 表示 
(1). 设 了 X(w) 为 非 负 随机 变量 ， P(X < x)=1, 令 


n2”—1 
Xn (w) = De 和 <X< E42}(w) + nT{X > n}(w) 
k=0 
则 XX (w) 是 随机 变量 ， 且 |Xn(w) 一 X(w) < 去 当 0<X(w)<n 时 ，Xn(w) 二 n 当 
X(w)=n 时 ， 故 limn 一 = Xn(w) = X(w). 
(2). 设立 (w) 为 一 般 随机 变量 , 令 和 + = (XV0), 革 -= 二 一 (了 人 0) ,显然 Xt+,X- >0 
由 上 ， 对 久 +, 对 -存在 Xi+ Xt,Xi 7X- 邻 X= Xt 一 Xi7, 则 XX. 





$ 1.3 ”和 矩 母 函 数 、 特 征 函 数 和 拉 氏 变换 
1. 和 矩 母 函数 (Moment generating function) 


定义 ”1.v. X 的 矩 母 函数 定义 为 


十 co 
w(t) 会 Betz) = | py 


一 Co 











如 上 式 右 边 积 分 存在 . 
显然 ， 如 式 的 大 阶 拭 存在 ， 则 





BE(X*) = (0). 


矩 母 (生成 ) 函数 由 此 得 名 .可 以 证 明和 矩 母 函数 与 分 布 函 数 是 一 一 对 应 的 . 
对 于 取 值 非 负 整数 rz.v. X, 即 P(X = = px >0>0> io 二 1, 则 半 的 逢 母 
函数 记 为 11 


Co 
g(s) = BE(s*)= prs’, 0<s<1. 
k=0 
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显然 ，px = g(0)/kl, 且 有 BEIX( 一 1( 瑟 -人 (和 -1=90(0. 着 Xi1,Xs 相 
互 独立 ， 窍 悚 函数 记 为 g1(s),g2(s). 则 不 难 证 明 和 1 + X2 的 窍 母 函 数 为 


GX1+Xs(8) = g91(8)g2(8). 


对 于 数列 {a%,n > 0}, 如 


A(s) = Dans”, Is|<1, 


n=0 
则 称 4(s) 为 {an,n > 0} 的 母 函 数 . 
母 函 数 的 几 个 重要 性 质 : 
1° E(x)=g'(1). 
2° D(z)=g"(1)+9 (2)— [9(1)]. 
3° 9(1) = DR Fpr. 


2. 特征 函数 (Characteristic function ) 
定义 记 
4(t) 全 B{exp(itX)} | exp(itz) dFx (2), 





其 中 ;= VvV-1, 一 x <t<++x. 称 8(t) 是 1.v. X 的 特征 函数 . 
$(t) 的 几 个 重要 性 质 : 
1° $0)=1,1$()| < 0). $0) = $0. 且 $(t) 在 (-x,+x) 上 一 致 连续 . 
2。 p(t) 具有 非 负 定性 ， 即 对 任 给 ”个 实数 二 及 复数 和 (1 < jin)， 


> > ol —t AN; > 0. 


= 


3” 着 XX 与 Y 相互 独立 ， 则 











px+rY(t) = px(t): y(t). 
4” rv. 天 若 BX" 存在 ， 则 当 尺 <n 时 
$0) = EX’). 


5” zr.v. 的 分 布 函数 与 特征 函数 是 一 一 对 应 的 关系 ， 即 给 定 F(z) 可 唯一 决定 $(t) ; 
反之 ， 给 定 (t) 可 唯一 决定 F(z) (唯一 性 定理 ). 
上 述 性 质 的 证 明 详 见 复旦 大 学 编 《 概 率 论 》 第 册 . 





3. 拉 氏 变换 (Laplace-Stieltjes transform 简 记 L-S 变换 ) 


1.4 条 件数 学 期 户 


定义 设 非 负 +v. 和 ,分布 函 数 Fx(2),s =a+ 太 ,这 里 a > 0.5 是 实数 ，; = VI. 
称 
次 号 亿 te , A 
Fx(s) 3 exp(—sz2)dFx(z) 
为 Fx(z) 的 L-S 变换 ， 或 称 t.v. XX 的 L-S 变换 . 口 
注意 : 永 (5) 与 Fx(z) 也 是 一 一 对 应 关系 ， 且 对 X1,X2 > 0 相互 独立 ， 有 


Px, xs(s) = 了 (5) Px,(s). 


$ 1.4 ”条 件数 学 期 望 


条 件数 学 期 望 是 随机 过 程 中 最 基本 最 重要 的 概念 之 一 为 了 直观 地 对 此 概念 有 个 正 
确 的 理解 .我 们 先 从 离散 型 1.v，( 简 记 d.r.v.) 入 手 ， 再 讨论 连续 型 r.v.( 简 记 c.r.v. ) 情 
形 ， 然 后 推广 到 多 元 t.v. 的 情形 . 


1, 离散 型 TFT.V。 的 情形 


设 二 随机 事件 4,B. 若 P(B) > 0, 称 P(4|B) = P(4B)/P(B) 为 事件 B 发 生 时 , 事件 
4 的 条 件 概率 ( 若 P(B) = 0, 则 P(A4|B) 没 定义 或 规定 为 0). 设 (X,Y) 为 二 个 dr.v… 其 联 
合 分 布 律 为 P(X= ziY =y)= pi >0)DjPy=1 若 P(Y = y))= 2 Ep)>0. 
称 





P(X=2zilY =%)= P(X= 7,Y =y)/PY = y)= p/p 
为 给 定 Y = vy; 时 ， XX 的 条件 分 布 律 . 称 


EB(X|Y = y;) 全 DziP(X = 


为 给 定 Y = vy; 时 ， 六 的 条 件数 学 期 望 . 

比较 (无 条 件 ) 数学 期 望 ZX = ,ziP(X = zi) 与 条 件数 学 期 望 B(X|Y = y;) 
的 异同 : ”EX 是 对 所 有 w < 0.X(w) 取 值 全 体 的 加 权 平 均 ; 而 E(X|Y = y) 是 局 限 
在 we {w :Y(w) = 切 ] 全 B; 时 ，X(w) 取 值 局 部 ( w < Bi ) 的 加 权 平 均 ， 这 是 因 
为 : 记 B) = {oe:7= 攻 4 = fo: 瑟 = zi 于 是 整个 样本 空间 Q 按 了 的 不 同 
取 值 分 为 Bi，…… , Bj,…. 各 互 不 相 容 事件 (2 = 二 也) 而 9 又 按 X 不 同 取 值 分 为 
41 ,Ai,…(Q = ,4;) 互 不 相 容 事件 . 


当 4;B; = 时 ， TA 0, P(X = zi|Y =») = 0, 于 是 


E(X|Y = DziP(X = zi|Y = >， 2 二 zilY = yj). 
i i AiB;z0 
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因此 E(X|Y =y) 是 we Bj 时针 (w) 的 局 部 加 权 平 均 如 图 1.4.1 所 示 . 

显然 ，B(X|Y = v4),…. ,BZ(X|Y = yy)… 依赖 于 Y= yj, 即 依 赖 于 w€ Bi = {o : 
Y = yj}, 这 样 ， 从 全 局 样本 空间 Q 及 对 w < Q 可 以 变化 的 观点 看 ， 我 们 有 必要 引进 一 个 
新 的 随机 变量 . 记 为 B(X|Y). 对 于 这 个 1.v. B(X|Y), 当 we Bj 时 ( 即 Y =yj 时 ) 它 的 
取 值 为 E(X|Y 二 yj). 称 Tv. E(X|Y) 为 1.v. 铸 关于 rt.v. Y 的 条 件数 学 期 望 . 

为 给 出 E(X|Y) 的 确切 定义 及 表示 式 ， 引 进 事件 的 示 性 函数 如 下 : 记 





1, wE€EB;= {v2:Y(w)=y}, 
TBi(w) = 
0, wg¢B;= {wv:Y(w)=y}. 
显然 (15,(w) = 1 ， (= 切 ) 发 生 ， 亦 记 人) = Two 人) 
定义 记 
B(XIY)S D1) (0)B(X|Y =y), (1.4.1) 
了 














称 B(XIY) 为 和 关于 工 的 条 件数 学 期 望 . 
B(X|Y) 的 定义 包含 如 下 的 直观 意义 : 
1° rv. BE(X|Y) 是 1.v. 7 的 函数 ， 当 we {w :Y= 外} 时 ，B(X|Y) 的 取 值 为 
2(X|Y = yj). 事实 上 ， 它 是 局 部 平均 {B(XIY = yj),j €E N} 的 统一 表达 式 . 
2° 当 E(X|IY =y)#z EX|IY = y)(i A£)NHPIE(XIY)= E(XIY =y)] = P(Y = 
y): 否则 , 令 Dj;= {k: EB(XIY =y)= BE(XIY =y))}. 则 





P{E(X|IY)= E(XIY =y)} = >》 P(Y =y;). 
RED; 


3” 由 于 r.v. B(XIY) 是 rv. 工 的 函数 ， 故 它 的 数学 期 望 应 为 


E(E(X|Y)) = 2 B(X|YF yj )P(Y = y;). 
了 


例 : +.v，(X,Y) 的 联合 分 布 律 如 表 1.4.1. 


1.4 条 件数 学 期 户 









1/27 2/27 2/27 | 5/27 
|_ Pp: | 8/27 13/27 .6/27| 
表 1.4.1 





试 求 B(X|Y) 的 分 布 律 ， BX 及 E(E(X|Y)). 
解 : 为 求 B(X|Y = 四, 先 求 P(X=iY=j),i,j=1,2,3,. 当 Y=1 时 ， 














| 9.7 2 
P(X=1Y=1)= P(X=1,Y WR 
同 理 P(X=2|Y =1)=4/7,P(X=3|Y =1)=1/7. 故 
a A Pe 雪 
DY A ee 
类 似 地 ， 
3 民 
5 四 3 28 
E(X|Y = 2) 2 ilY = 2) 1 
11 








又 P{E(X|Y) = BE(XIY = 四 } = P(Y = 四 ,j=1.2,3 故 (XIY) 的 分 布 律 列表 如 下 : 


E(X|Y =)) Be 
P{E(X|Y) = E(X|IY =/)} = P(Y =)) | 这 





WI || 


S| 所 | 多 








i 13、7 了 28 1 11 5 2 

5 ad 5 

E(E(X|IY))=( 5 ) 儿 于 ) | (15)(37) (5 儿 二 人 二 
而 

3 
a 8 6 5 
0 | 
15 
得 
52 
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自然 要 问 ， 一 般 情形 下 ， 是 否 BX = E(B(XIY)) ? 它 的 直观 意义 又 是 什么 ? 试 证 
明 : 

1° 在 (X,Y 了 ) 为 dr.v. 且 BIX|< ~ 时 ，EX= EB(E(X|Y)), 
2° E(X|X)= 


2. 连续 型 r.v. (X,Y 了) 的 情形 


设 (X,Y) 的 联合 概率 密度 函数 (jointly probability density function 简 记 j.p.d.f.) 为 
f(z,y), 了 的 pdf. 为 记 (W)= f(z,y)dz, 设 掺 (y) >0,BIX|< ,给 定 Y=y,X 的 
条 件 概率 密度 函数 ( 简 记 c.p.d.f ) 为 











Bai. 
条 件 分 布 函数 为 
Frxir=y(z 人 = P(X < wlY = 1)= > 1 i 
条 件数 学 期 望 为 
B(XZ= 切 = sfrx|yy sly) do = 及 zy 罗 站 


令 DEB. 考 虑 了 ED 下 ， 开 的 条 件 分 布 函数 为 


PK<zyecD) Ve Ly )ay) dz 


F(z|D)= P{X < zlY e D}= EPEeD) = hep fr dy 





在 YeD 下 ， 革 的 条 件 p.df. 为 


2 hep Fle,Y) dy 
fx|p(?|D) = PYED) 


于 是 在 YE 下， 三 的 条 件数 学 期 望 定 义 为 


(1.4.3) 


E(XI|Y ED) < 人 ZID(Z|D)dz = J (三 zf(z.y) ds) dy/P(Y E 站). 
一 cc y 


一 Co 


由 上 式 定义 ， 有 


zxlrsD=/ (三 。 Co ar) fr(y )dy/ PlY € D)) 


1 
EYED) 人 E(X|Y = y)fy (vy) dy. 





1.4 条 件数 学 期 户 


显然 ， 条 件数 学 期 望 B(X|Y = y) 是 y 的 函数 . 这 样 ， 从 整个 样本 空间 及 从 we 可 
以 变化 的 宏观 上 看 ， 可 以 且 有 必要 定义 一 +r.v. B(X|Y), 使 其 在 Y = y 时 ，B(X|Y) 的 取 
值 为 B(X|Y =). 

定义 ” 设 (X.Y) 具 有 jp.df. f(z,y), 了 的 pdf. 为 f(y) > 0,B|X|< sc 看 Tv， 
2(X|Y) 满足 : 

1” E(X|Y) 是 1r.v.Y 的 函数 ， 当 Y=y 时 ， 它 的 取 值 为 B(X|Y = ); 

2” 对 任意 De 8B， 


BIB(X|Y)|Y EeD)= EX|Y €D). (1.4.4) 
称 1.v. B(X|IY) 为 人 关于 Y 的 条 件数 学 期 望 . 口 


从 定义 1。， 由 于 B(X|Y) 是 1.v. 了 的 函数 ， 故 它 的 数学 期 望 应 为 
十 Be 
BBC = /BxlY = ay 


而 从 2°， 当 取 D= 了 =(-x,+%) 时 





EX = E{X|Y e(-2%,+2%)} = B{B(X|Y)|Y Ee (x,%)} = EIB(X|Y) 
十 co 
= E(X|Y = fy (yay. 


例 : (X,Y) 是 二 维 正 态 分 布 . 即 (X,Y) ~ NW(j,y2,p,03,03). 即 j.p.dt 为 











1 1 (Zp) 。(z 一 HG 一 AH) (一 Ha 
区 一 2 | 
f(x,Y) pp 31 3)| Er: p 2 ]} 
则 
- 三 二 
fx=eyls) = fx(z) | | 293(1— p?) lv por a) ) 
~ N((p2 + pT(s— pa).o8(1— Pp)). 
故 
BE(Y|X = 2)= y+ pl(z — 41); 
oO1 
E(Y|X)= ja 十 p(X 二 (1.4.5) 


此 时 EB(Y|X) 是 X 的 线性 函数 ， 这 是 正 态 分 布 的 重要 性 质 . 
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3. 条 件 概率 与 条 件 分 布 函数 
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设 r.v. (X,Y 了 ) 及 任 一 随机 事件 B CQ, 记 


1 wEB, 
ou-| 0 wg¢B. 


即 Is 是 B 的 示 性 函数 .显然 
P(B)= Bllp(w)). 


我 们 称 
ElIp(w)|Y) S$ P(BIY) 


为 事件 B 关于 +r.v. Y 的 条 件 概率 ， 此 时 P(BIY) 是 r.v. 且 是 了 的 函数 ， 对 于 Yz < 下 ， 
取 B=(w: 针 <x). 称 


F(z|Y)S P(X < olY) = B(xcwlY). (1.4.6) 


为 关于 Y 的 条 件 分 布 函 数 . 
于 是 有 关 条 件 概 率 ， 条 件 分 布 函数 均 可 用 条 件数 学 期 望 的 概念 及 性 质 来 处 理 . 





4. 条 件数 学 期 望 的 基本 性 质 


二 个 rv. 21,2s 如 P(21 =2)=1 称 2,22 几乎 处 处 (或 称 几 乎 必然 ) 相等 ， 记 作 
Z1 = Ga a.s. 

设 r.v，X,Y,Xi(1 < < n),g(z),h(y) 为 一 般 函 数 ， 且 E|X|,E|X;| < (1 <i< 
n), Blg(X)h(Y)| < ~ Blg(X)| < sc 我 们 有 : 


下 0 
E(E(X|Y)) = EX: (1.4.7) 
9 9 
如 >》 oiXilY)= >》 oiB(XY) as., (1.4.8) 
fl t= 
其 中 Qi(1 < i <n) 为 常数 . 
3 0 
El(g(X)h(Y)Y] = h(Y)E(g(X)|Y) as (1.4.9) 
特别 


E(X|X)=X a.s., 
Elg(X)h(Y)] = EIh(Y)BE(g(X)Y)]. (1.4.10) 
18 


4” 如 六,Y 相互 独立 ， 则 
E(X|Y)= EX. 


1.4 ， 条 件数 学 期 望 
下 面 仅 证 (1.4.10) 式 ， 其 它 留 作 练习 ， 


十 ee 十 co 
ji /fs (z.y) dz dy 





UF 请 g(z z| hy) fy (W) dy 


十 co 
E(g(X)|Y = yh(y)fy (vy)d 


lhcy) a sg(X)Y). 


由 上 面倒 数 第 二 式 ， 有 


十 2 
Bly(X MY)) = 由 re ol 


特别 地 取 g(X) = Po) hly) 三 1 时 ， 得 
十 co 
P= PAY=Wh ey 


(1.4.12 ) 式 是 全 概率 公式 的 推广 . 


5. 对 多 元 随机 变量 的 条 件数 学 期 望 


(1). 离散 型 随机 变量 


(1.4.11) 


(1.4.12) 


设 三 个 1.v (X,Y,2), 其 中 (Y,2) 为 dir.v., 称 1.v. B(XIY,2) 是 XX 关于 Y,2 的 条 件 


数学 期 望 ， 若 它 满足 : 


1” B(X|Y,2) 是 (Y,2) 的 二 元 函数 ， 当 了 = yj:2Z = 纹 时 ，B(X|Y,2) 的 取信 为 


BE(X|Y = ;2 = #1); 
2。 对 任意 Di < E!, Di E 及 1， 


BC 2)|Y EDj;,Z € Di] = E(X|Y € D;,2 € D;), 


用 示 性 函数 表示 ， 即 


BE(X|Y,2) 全 yy BX|Y = yj,2 = 4). 


19 


(2). 连续 型 随机 变量 
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如 (了 X,Y,2) 为 c.r.v.( 连 续 型 1.v.),j.p.df. 为 f(z,y,z), (了 2) 的 j.p.df. 为 户 z( 人 2 


fxl(y.2)=002) (2|y, 风土 f(z2,Y,2)/ fy,z(y, Zz) 


设 BIX| < ,fiz(y,z) > 0, 则 zr.v. B(X|Y,2) 满足 : 
1” E(X|Y,2) 是 Y, 2 的 函数 , 当 Y = y,2 =z 时 , 它们 取 值 为 B(X|Y = y,2 = 2). 
2。” 对 任意 ， Di C ER!, D, C Rl, 


B{(E(XIY, 2)|Y E D1,Z € D2)} = E(X|Y € Di1,2 € Ds). 


(3). 元 随机 变量 


对 dir.v. {X, 款 ,1 <k<n} 的 情况 ， 称 
人 . Re 
BE(X|Yi 及) 全》 >》 Ta (os) EXIT = j= jh = fn) 
j1 jn 
为 瑟 关 于 (五 ，… ,六 ,) 的 条 件数 学 期 望 . 
若 EIX|, EIX;| < 00,1 < 7 Ss 2, Elg(Y1,... ,Y,)| < Ce) 则 类 似 有 : 
1 E(a1X1 十 QoX> Yi pe 二 S20 oiB(Xi|Y, Hs Sy) dad.S., 
2° Elg(Yi, ,FX ,= gi ,Ti) BX Yn) as.; 
3° 如 了 与 于 ,… ,了 独立， 则 B(X|Yi,… ,了 ) = BX as.. 
证 明 从 略 . 





6. 条 件 乘法 公式 与 条 件 独立 性 


(1). 条 件 概 率 的 乘法 公式 
设 4,B 为 两 个 随机 事件 ， 由 条 件 概 率 的 定义 可 知 
P(AB) = P(A)P(B|A). 
与 上 面 的 概率 乘法 公式 类 似 ， 我 们 有 条 件 概率 的 乘法 公式 如 下 : 
命题 1.4.1 设 4,B.C 为 三 个 随机 事件 ， 则 
P(BC|A) = P(B|A)P(C|AB). (1.4.13) 


证 : 按 条 件 概率 的 定义 ， 当 P(4B)>0 时 
P(ABC) P(AB)P(ABC) 
P(A) P(A4) PodB) 


因此 按 我 们 对 条 件 概 率 的 等 式 的 有 关 约 定 ， (1.4.13) 式 成 立 . 口 














P(BC|A)= P(B|A)P(C|AB). 
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(2). 条 件 独 立 性 
我 们 知道 , 当 两 个 随机 事件 4, B 独立 时 , 有 P(4B) = P(4)P(B) 即 P(4|B)= P(4). 
同样 ， 与 上 面 的 独立 性 概念 类 似 ， 我 们 有 条 件 独 立 性 的 定义 如 下 : 
定义 ” 设 4, B,C 为 三 个 随机 事件 ， 称 事件 4,C 相对 于 事件 妃 条 件 独立 ， 振 满足 
P(C|4B) = P(C|B). (1.4.14) 


对 于 条 件 独 立 性 我 们 有 如 下 结论 : 
命题 1.4.2 设 4, B,C 为 三 个 随机 事件 ， 则 事件 4, C 相对 于 事件 B 条 件 独立 的 充 
要 条 件 为 
P(AC|B) = P(A|B)P(C|B). (1.4.15) 
证 : ”必要 性 ， 由 命题 1.4.1 
P(AC|B) = P(A|B)P(C|AB), 


当 P(4B) = 0 时 ，P(4|B) = 0, 因此 (1.4.15) 式 两 边 均 为 0, 而 当 P(4B) > 0 时 , 将 
(1.4.14) 式 代 入 上 式 即 得 (1.4.15) 式 ， 
充分 性 .只 需 考 虑 P(4B) > 0 的 情形 ， 由 命题 1.4.1 及 (1.4.15) 式 可 得 





S00) = P(C|B) 口 
P(A|B) : 





P(C|4B)= 


$ 1.5 随机 过 程 的 概念 


在 概率 论 中 ， 我 们 研究 了 随机 变量 ，n 维 随机 向 量 ， 在 极限 定理 中 ， 涉 及 到 了 无 穷 
多 个 随机 变量 ， 但 局 限 在 它们 之 间 是 相互 独立 的 情形 ， 上 述 情 形 加 以 推广 ， 即 研究 一 族 
无 穷 多 个 ， 相 互 有 关 的 随机 变量 ， 这 就 是 随机 过 程 ， 





1. 概念 


设 对 每 一 个 参数 t+& T,X(t,w) 是 一 随机 变量 ， 我 们 称 随 机 变量 族 Xz = {X(t,w)， 
t ET} 为 一 随机 过 程 (stochastic process) 或 称 随机 函数 ， 其 中 TC 是 一 实数 集 ， 称 为 
指标 集 . 

用 映射 来 表示 X7， 





X(t,w):TxQ oR. 


21 
即 和 (.,.) 是 定义 在 Tx 8 上 的 二 元 单 值 函 数 ， 固 定 te T,X(t,…) 是 定义 在 样本 空间 9 上 
的 函数 ， 即 为 一 +.v.. 对 于 w € 9, 针 (,w) (t 在 算 中 顺序 变化 ) 是 参数 te 了 的 一 般 函 数 ， 


第 一 章 ”预备 知识 与 随机 过 程 的 基本 概念 


通常 称 X(.,w) 为 样本 函数 ， 或 称 随 机 过 程 的 一 个 实现 ， 或 说 是 一 条 轨道 . 记号 和 (tw) 
有 时 也 写 为 Xi(w) 或 简 记 为 X(t) 或 Xi. 

参数 t < 了 一 般 表 示 时 间或 空间 .参数 集 了 常用 的 有 三 种 : (1) Ti = No = 
{0,4,2.] (DD=2= {一 2, 一 1,0,1,2,…}, (3) B= a, 可 其 中 4 可 以 取 -x 
或 0,2 可 以 取 +<c. 当 工 取 可 列 集 ( 志 或 二 ) 上 时， 通常 称 Xr 为 随机 序列 . 

Xr 的 取 值 也 可 以 是 复数 ，R" 或 更 一 般 的 抽象 空间 . Xi(t eT) 可 能 取 值 的 全 体 之 
集 称 为 状态 空间 , 记 作 S$. 5 中 的 元 素 称 为 状态 . 


2. 例子 


1” 质 点 在 直线 上 的 随机 游 动 . 设 一 质点 在 时 刻 t= 0 时 处 于 位 置 a (整数 ), 以 后 每 
隔 单位 时 间 ， 分 别 以 概率 ?及 4 = 1 一 p 向 正 的 或 负 的 方向 随机 移动 一 个 单位 ， 记 X, 为 
质点 在 时 刻 t = n 的 位 置 . 固定 n,X 是 1.v. 考虑 不 同 的 时， {Xn > 0} 是 一 随机 
序列 . 

2 ”考虑 某 “ 服 务 站 ”在 [0,4 内 来 的 “顾客 ” 数 记 为 N(t), 固定 t, N(t) 就 是 一 随机 
变量 .因此 {N(t),t > 0} 是 一 随机 过 程 . 这 里 的 “顾客 ”可 以 是 电话 的 “呼唤 ?>， 通 讯 设 
备 中 的 “信号 ”， 一 个 系统 的 “更 换 设备 ”， 放 散 性 物质 衰变 的 “粒子 ”等 . 

3” 在 外 界 是 随机 载荷 条 件 下 ， 某 零件 t 时 的 应 力 X(t) 是 随机 的 ， 故 {X(t),t € T} 
是 一 随机 过 程 . X(t) 亦 可 表示 某 电 路 中 的 电压 ， 设 备 的 温度 ， 河 流 的 流量 (或 水 位 ), 气 
体 的 压力 等 等 . 

4" 考虑 某 输入 输出 系统 ， 例 如 最 简单 的 R-C 电路 ， 设 输入 端 有 一 个 干扰 信号 电压 
记 为 E(t), 记 Q(t) 为 t+ 时 电路 的 电量 ， 则 它 满足 

dQ!lt 

j 

由 于 {(),t E T} 是 一 随机 过 程 ， 容 易 理解 {8(),t e T} 也 是 一 随机 过 程 ， 上 式 是 一 个 
最 简单 的 随机 微分 方程 . 











1 
十 GY) = €(t). 


3. 随机 过 程 的 数字 特征 及 有 限 维 分 布 函数 族 

设 {X(t),t ET} 是 一 随机 过 程 . 为 了 刻画 它 的 概率 特征 ， 通 常用 它 的 均值 函数 ， 方 
差 函 数 ， 协 方差 函数 (相关 函数 ) 以 及 有 限 维 分 布 函数 族 及 特征 函数 族 等 . 
(1). 均值 函数 

随机 过 程 {X(t),t € T} 的 均值 函数 定义 为 (以 下 均 假定 右 端 存在 ): 


22 
m(t) S B(X(H)). 
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(2). 方差 函数 
随机 过 程 {X(t),te T} 的 方差 函数 定义 为 : 


D(t) SB{(XE) — m(t))}. 


(3). 协 方差 函数 
随机 过 程 {X(t),t€ T} 的 协 方差 函数 定义 为 : 


R(s,t) S Cov (X(s), X(t)). 


(4). 相关 函数 


随机 过 程 {X(t),te T} 的 相关 函数 定义 为 : 


be A Cov (X(s), X(t)) 
A VD(t). D(s) 





(5). 有 限 维 分 布 族 
设 t ET,1<i<n(n 为 任意 正 整 数 ), 记 
下 (要 tay P11 Bo Tn) = P(X(t1) < x1, Xt) < P21 ,R(t ) < rn), 
其 全 体 


{F(ti,t2, tn DT1,Z2 Cn),t1,t2, vb € T,n> 1} 


称 为 随机 过 程 的 有 限 维 分 布 族 . 它 具 有 以 下 二 个 性 质 : 
1 ”对 称 性 ”对 (1.2……:mn) 的 任 一 排列 (71,j2,… ,加 ) 有 
(tt tj Tj Pja) , Tj, ) x Flti,t2a,* tn; 1 22， ; 
2。 相 容 性 ”对 mm <n, 有 


五 (和 de bn’ P11: EP ,00) 一 五 (三 在 Te ,大 所 县 


一 个 随机 过 程 的 概率 特性 完全 由 其 有 限 维 分 布 族 决定 . 


(6). 特征 函数 
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记 
Plt1, to, yi tn; 01， 人 ,0n) ee E{exp{il01 X(t1) 二 On X(t )]}} 
十 co 十 co 
可 | | exp{i[0121 + Orn]}F (ti stn: dz , don) 


称 {p(t tn; 0 ,0n),n > 1 iy :tn 本 了 为 随机 过 程 {X(t),t 所 T} 的 有 限 维特 
征 函 数 族 . 


§ 1.6 随机 过 程 的 分 类 


设 XT = {X(t),t ET} 为 随机 过 程 ， 按 其 概率 特征 ， 分 类 如 下 : 


1. 独立 增 量 过 程 
对 五 <b< < 如 ET<i<n 若 增 量 
X(t1), X(t2) — X(t), X(t3) 一 有 (四 ) ,X(tn) — X(tn-1) 


相互 独立 ， 则 称 {X(t),t € T} 为 独立 增 量 过 程 (Process with independent increments). 若 
对 一 切 0 < s<t, 增 量 XX(t) 一 久 (s) 的 分 布 只 依赖 于 +t 一 s, 则 称 Xz 有 平稳 增 量 ， 有 平稳 
增 量 的 独立 增 量 过 程 简称 为 独立 平稳 增 量 过 程 . 

常见 的 泊 松 (Poisson) 过 程 和 维 纳 (Wiener) 过 程 (或 称 Brownion motion) 就 是 二 个 
最 简单 也 是 最 重要 的 独立 平稳 增 量 过 程 . 





2. 马 氏 过 程 (Markov prosess) 


粗略 地 说 ， 一 随机 过 程 ， 若 已 知 现在 的 + 状态 Xi. 那么 将 来 状态 X,(w > 1) 取 值 (或 
取 某 些 状态 ) 的 概率 与 过 去 状态 X.(s < 1) 取 值 无 关 ， 或 更 简单 地 说 ， 已 知 现在 ， 将 来 与 
过 去 无 关 (条 件 独立 ), 则 称 此 性 质 为 马尔 可 夫 性 (无 后 效 性 或 简称 为 马 氏 性 ) 具有 这 种 马 
氏 性 的 过 程 称 为 马 氏 过 程 ， 精 确定 义 为 : 

随机 过 程 {Xt,te T}, 着 对 任意 本 <t2… < 机 <twnl<i<n, 及 ACR, 总 有 


PR E 4 = 1, Kts = 122," , Kt, = Ln) = P(Xt EL4R = 2n), 


则 称 此 过 程 为 马尔 可 夫 过 程 (Markov Process)， ?4 
我 们 称 P(s,x:t,4) = P(X: € A|X, 二 zjs<< 为 转移 概率 函数 (transition proba- 
bility function ). 


1.6 ”随机 过 程 的 分 类 

Xt 的 取 值 全体 构成 的 集合 记 为 5, 称 为 状态 空间 ， 对 于 马 氏 过 程 Xz = {Xi,t € T}, 
当 5 = {1,2,3,.…} 为 可 列 无 限 集 或 有 限 集 时 ， 通 常 称 为 马 氏 链 (马尔 可 夫 链 ， Markov 
chain). 样本 函数 是 连续 的 马 氏 过 程 {Xi,t E [0, oo]} 称 为 扩散 (diffusion) 过 程 . Poisson 
过 程 是 一 个 最 简单 连续 时 间 马 氏 链 ， 而 Brownion Motion 则 是 一 个 最 简单 的 扩散 过 程 . 


3. 平稳 过 程 及 二 阶 矩 过 程 


(1). 宽 平 稳 过 程 (或 协 方差 平稳 过 程 ) 








一 随机 过 程 Xz, 着 对 Y7,t € T, D(X(t)) 存在 且 EB(X(t)) = m, Cov (和 Xi) = 
R(T) 仅 依 顿 r. 则 称 Xz 为 宽 平 稳 过 程 (wide sense stationary process), 即 它 的 协 方差 不 随 
时 间 推 萝 而 改变 . 











(2). 二 阶 矩 过 程 

一 随机 过 程 Xz, 关 对 Yt € T, DX 存在 ， 则 称 为 二 阶 矩 过 程 (fmnite second moments 
process). 
(3). 严 平稳 过 程 


一 随机 过 程 Xr, 车 对 Vti,t2.… .ty ET 及 六 > 0 (Xu, Xi ,Xi,) 与 (Xt 
Xts+n,"… ,六 1,+4) 有 相同 的 联合 分 布 ， 则 称 该 过 程 为 严 平稳 过 程 (strictly stationary pro- 
cess). 严 平稳 过 程 的 一 切 有 限 维 分 布 对 时 间 的 推移 保持 不 变 ， 特别 ， X(t), 卫 (s) 的 二 维 
分 布 只 依 闲 于 一 s. 

尽管 从 实际 应 用 的 角度 来 看 要 求 追溯 到 无 穷 的 过 去 似乎 有 点 不 现实 ， 但 为 数学 讨论 
方便 ， 平 稳 过 程 (包括 宽 、 严 两 种 情况 ) 的 指标 集 应 取 为 (一 ,+x) 或 全 体 整 数 (离散 时 
间 情 形 )， 


4. 蒜 (Martingales) 
若 对 Vt€ET,E|X(t)| < x, 且 对 Vti,tz <…:<t<t+1 有 
BE(X(tuti)|X(t1), X(ta), ,X(tn)) = X(tn) as., 
则 称 {X(t),t Ee T} 为 拷 . 
近 十 多 年 ， 性 在 现代 科技 中 有 越 来 趣 泛 的 应 用 . 


5. 更 新 过 程 (Renewal Process) 


第 一 章 ”预备 知识 与 随机 过 程 的 基本 概念 


设 (Xr,k > 1) 为 独立 同 分 布 的 正 的 随机 变量 序列 ,对 Vt > 0, 令 50 = 0,5n = 
Dea 并 定义 
N(t) = maz{n :n>0,5, <t}, 


称 {N(t),t > 0} 为 更 新 过 程 . 
N(t) 可 以 解释 为 [0,4] 内 更 换 零 件 的 个 数 或 系统 来 的 信号 (粒子 ) 数 ， 或 “服务 站 ” 
来 的 “顾客 数 ”等 . 


6. 点 过 程 (或 称 计数 过 程 )(point process) 


一 个 随机 过 程 {N(4), 4 C T} 是 一 点 过 程 ， 若 W(4) 表示 在 集合 4 中 “事件 ”发 生 
的 总 数 ， 即 它 满足 : 

1° 对 VA CT,N(4) 是 一 取 值 非 负 整 数 的 随机 变量 (N(W) = 0): 

2” 对 v41,42 CT 着 4142 = 由 则 对 每 一 个 样本 有 NU4iU4a) = N(41)+N(42). 

注 : 参数 集 T 可 以 是 了 ", 也 可 以 是 任意 一 抽象 非 空 集 . 

Poisson 过 程 是 简单 的 点 过 程 . 





练习 题 


1.1 设 w 为 取 值 非 负 整数 的 随机 变量 ， 证 
EN = 和 Pt >n)= P(N >n), 
二 千 三 0 


设 是 非 负 随机 变量 ， 具 有 分 布 函 数 F(z), 证 


EX = A — F(z)) dz, E(X")= 由、 nz ll — F(z) dz (n>1). 
0 0 


1.2 设 Xi1, Xo,… ,及 ,独立 同 0-1 分 布 ， 即 P(Xn = 1)=p2>0,P(X, = 0)=4a> 
0,p+g=1, 令 4= {X11+X=0}),B= {X;+X3=2},C= {X+Xs=1}. 试问 4 
与 B 是 否 相 容 ? 是 否 独立 ? 4 与 C 是 否 相 容 ? 说 明理 由 . 并 求 


P(X; = 4), 0<k<n. 
Ys 


1.3 设 Ni1, Na, Ns 独立 ， N; 是 参数 为 Ai 的 Poisson 分 布 ， 2 一 1; 2,3. 
1. 求 P(Ni+Ns=n), neN; 26 
2. 求 P(N =EN+N=n), 0<khk<n; 
3. 证 Ni + Na 与 Ns 独立 


练习 题 


4. 求 BE(Ni|Ni+ Nz) 及 E(Ni + Nz|Ni). 


1.4 (a ) 着 是 一 连续 型 随机 变量 ， 其 分 布 函 数 为 了 (z). 证 明了 = P(X) 是 [0.1] 上 去 
公分 布 的 随机 变量 . 
(b ) 如 果 UV 是 [0,1] 上 均 勾 分 布 的 随机 变量 ， F(x) 是 一 给 定 的 分 布 函数 . 则 2 = 
了 -1(D) 的 分 布 函 数 为 F(z), 其 中 了 7! 记 为 了 的 反 函 数 . 
1.5 设 1, Xs,.… ,了 ,:… 独立 同 0-1 分 布 . 且 有 P(X, =1)=p=1_P(X, =0).0<p< 
1.N 是 参数 为 入 的 Poisson 分 布 , 且 与 {XX,} 独立 .= Xi 二 Xs 二 XN = Di Xi 
求 & 的 分 布 ，Bé 及 Dt. 
1.6 设 {Xi.t > 0} 是 取 值 整 数 的 独立 增 量 过 程 ， 证 明 它 是 一 马 氏 过 程 
1.7 设 {XX,.n > 1] 是 独立 同 分 布 的 ， 而 且 EX = 0,B|X,| < sx 设 : 8 = 并 7 各， 
证 明 {5,,n > 1} 是 鞭 ， 
1.8 设 {en,n > 1} 独立 同 分 布 ，en ~ N(0,07), Xo=0,Xn = 二 aXn_iten (n>1,lal<1) 
试 求 
1 DY en (m>n) 有 lim ,~ DX,. 
2. E(Xn|X1, Xo, ,Kn1) 及 E(Xs|X1, X2). 
1.9 设 了 与 Y 是 离散 型 随机 变量 ， 定 义 条 件 方差 D(X|Y) = BI(X 一 (XIY))?| 了 ,证 
明 : DX = E(D(XIY))+ D(E(X|Y)). 
1.10 设 Xi1, 了,… ,Xn 独立 ，X; 是 参数 为 Xi 的 指数 分 布 ，1 <i<n, X01) < ,< Xn) 
为 相应 的 顺序 统计 量 ， 求 : 
1. Xi = 入 时 (XXXD) 的 联合 概率 密度 函数 ; 
.和 ;二 入 时 Xi) 的 概率 密度 函数 (1<i<n); 
,了 X1 十 X2 的 分 布 函数 ; 
(天 (3) X(3)) 的 联合 概率 密度 函数 (n > 3); 
5. Yt > 0, 证明: P(Xi < Xo| min(Xi, Xs) =t) = A/(M + No2). 
1.11 设 X1, 四 2,…. ,XX,,… 是 独立 同 分 布 ， 取 值 非 负 整 数 的 随机 变量 ， 记 Xo = 0, 若 
Xn > maz(Xo,X1,… ,Xn-1) 称 在 n 时 刻 一 个 新 记录 发 生 . 
1. 记 Vi 为 n 时 刻 (包括 ”时 刻 ) 创新 纪录 的 次 数 ， 求 BN 及 DN,; 
2. 记 公 -= 和 if > Y) 为 创 纪录 超过 yy 的 时 刻 , 求 : P(T,=n) (n= 2,3). 








上 Co 2 





1.12 设 X 与 Y 独立 是 P(X =i)= f(i),P(Y = 7)= 9(7),f(2),g(i) > 0,47 EN, Do0f(i) = 
D09() =1 设 


27| Crpi(1l—p)-r, 0<k<L, 
| kl 中 =“ 全 
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1. 证 明 : 
人 0 


exp(~00), g(i) = 机 exp(-9) (ie N), 


f(i) = 
其 中 = p/(1 一 ,a 9 > 0 为 任意 实数 . 


2. 令 F(s) = Do /os ,G(s) = 开 og(is, 证明; 





F(WF(vV)= Flup+ (1 — pW)Gwp+ (1 — pu), 


上 且 了 满足 条 件 : G( 赴 ) = 着 
1.13 设 (X,Y) 是 取 值 非 负 整 数 的 二 维 :v. 其 联合 母 函 数 为 


pxy(st)= st PX=iY=)), lslltl<1, 
及 各 自 的 母 函 数 为 


bx(s)= YsPX=), drt)= > PY = 


7 二 


加 


证 明 X,Y 独立 的 充 要 条 件 是 
Gxy (st) = px(s)py(t), vls|<1,lt|<1. 
1.14 设 X,Y,2 为 三 维 离散 型 1.v. BI|X| < ,证 
B(X|Y, 2)|Y] = E(XIY) = BIB(X|Y)|Y. 2], 


并 说 明 其 直观 意义 . 
.15 设 和 ~ N(1,0”), 求 X 在 了 > 0 下 的 条 件 概 率 密度 函数 ， 及 当 j= 2,c = 1 时 的 
E(X|X >0). 
.16 设 X1, XX2,… 独立 同 分 布 ， 且 X; 是 (0,t) 上 的 均 色 分布， 求 其 顺序 统计 量 X(1) < 
Xo<.…<Xo 的 联合 概率 密度 . 
1.17 设 X1, Xs 相互 独立 且 X; 是 参数 为 A; (i = 1,2) 的 指数 分 布 ， 令 2 = min(X1, 2)， 
求 2 在 给 定 2 = Xi 下 的 条 件 分 布 函数 . 
.18 设 随 机 过 程 {Xi;(t),t > 0} 为 : 
1. Xi1(t) = + Yt, 其 中 ,Yiid ~ N(0,12); 
2. s(t) 二 &cos(wt 十 办 ,其 中 屎 > 0 为 常数 ， 5 为 独立 Tv E ~ N(0,03).$~ 
Tr[0, 27]; 
3 Xslt) = 部 H hemt, 其 中 1 V2 了 和 > 0 为 常数 ， 避 为 rv, 且 Ber = 
0, BEéit/ =0( zk), EE2=o>0. 


2” 


人 





Ex 


练习 题 


求 : 
1 milt) 2 EX;(t), D;(t) 一 Var X;(t), Ri(t1,t2) -= Cov (Xi(t1), Xi(t2)), (2 
1,.2.3 
2. X1(t) 的 一 维 与 二 维 分 布 . 


1.19 设 随 机 过 程 {B(t),t > 0} 是 独立 增 量 过 程 ， 且 Vs,t>0,B(s+t)—B(s)~ N(0,t). 


人 从 


2. 令 


0， B(t)<z, 


求 BX2(t) 与 R(ti,t2). 


29 


第 二 章 ”Poisson 过 程 及 其 推广 


$ 2.1 定义 与 背景 


Poisson 过 程 最 早 是 由 法 国人 Poisson 于 1837 年 引入 的 ， 故 得 名 . 
定义 一 随机 过 程 {N(t),t > 0} 称 为 时 齐 Poisson 过 程 , 知 满足 : 
1 ”是 一 计数 过 程 ， 且 N(0) = 0; 

2 ”是 独立 增 量 过 程 ， 即 任 取 0 < 三 <ts < < 加， 


th 一 NG 加 ) 一 nn-1) 


相互 独立 ; 
3 ” 增 量 平稳 性 ， 即 Vs,t > 0,n>0,PIN(s+t)}— N(s)=7n]= PIN(t) = nl; 
4” 对 任意 上 > 0 和 充分 小 的 At > 0, 有 





PIN(t + At) — N(t) = 1] = AAt + olAt). GD 
PIN(t + At) — N(t) > 2] = oAt). 和 
其 中 和 > 0( 称 为 强度 常数 ), 且 limat_,o 2 = 0. D 


时 齐 Poisson 过 程 (有 时 简称 为 Poisson 流 ), 是 一 种 典型 又 简单 的 ， 应 用 极其 广泛 的 
随机 过 程 . N(t) 可 表示 在 [0,4] 时 间 随 机 事件 发 生 的 个 数 . 它 可 用 于 刻画 “顾客 流 ”， 
“粒子 流 ”，“ 信 号 流 ” 等 的 概率 特性 . 

背景 : 考虑 其 电话 交换 台 在 [0,4] 内 来 的 呼唤 数 ， 记 为 N(t). 显然 它 是 一 计数 过 程 . 
若 它 是 一 平稳 独立 增 量 过 程 ， 且 在 一 很 短 时 间 间 隔 At 内 来 一 次 呼唤 的 概率 与 At 成 正 
比 ， 来 一 次 以 上 呼唤 的 概率 是 (At) 的 高 阶 无 穷 小 则 {N(t),t > 0} 就 是 Poisson 过 程 . 
N(t) 表示 在 [0, 内 事件 发 生 的 个 数 . 有 以 下 重要 定理 : 

定理 2. 1. 1 若 {N(t),t > 0} 为 Poisson 过 程 ( 简 记 P.P.), 则 Ys,t > 0, 有 

PIN(s+t#)— N(s)=k]= OO- kEN, Cd) 

即 Wt+s)- N(s) 是 参数 为 Mt 的 Poisson 分 布 . 

证 : 由 增 量 平稳 性 ， 记 已 ( 贡 =PNI 扩 = 由) 三 PINGs+ 有 -NGs) 三 站 先 看 半 = 
的 情形 . 因 





(N(t+h)=0)=(N(t)=0,N(t+h)— N(t)=0), h>d0. 
故 30 


Polt+h)=P(N(t +h)=0)= P(N(t) =0,N(t+h)— N(t) =0) 


2.1 ”定义 与 背景 


=P(N(t) = 0)P(N(t+h) 一 N(t)=0) ，  ( 增 基 独立 ) 





=P(t) Py(h). 
另 一 方面 
Po(h) = P(N(t+h)— N(t)=0)=1— (M+o(h)), 
代入 上 式 ， 有 人 
b(t 十 J of) _ OBO + 


令 一 0, 两边 取 极限 ， 得 
P/(t) = —APo(t) 
这 是 一 阶 线性 常 系数 微分 方程 . 由 初始 条 件 Po(0) = P(N(0) = 0) = 1, 可 得 
Pt) = et 
再 看 mn > 0 的 情形 ， 因 
{N(t+h)=n}={N(t) =n,N(t+h)— N(t) = 0)} 
UN =% -1 N(t+h)— N(t) = 1} 
(NG = nL Nt+th)— Nt) = 
色光] 
故 
Pi(t+h)= P(t)(l— Mh om oh))+ Pari(t)(Ah + o(h)) + o(h). 
化 简 可 得 


Pn lt 孙 h) ex P(t) 上 
太 = 


令 hh 一 0, 两 边 取 极 限 ， 有 


AP 人 AP, i() + oe. 





且 初 始 条 件 
Pi(0) = P(N(0) =n) = 0. 
即 
pe (t)] = Me P,_1(t). 
当 n= 二 1 时 和 
ed) 2 
注意 到 初始 条 件 P1(0) = 0, 可 得 31 


Pi(t) = (At)e 
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再 用 归纳 法 即 有 
P(t) = C9 人 


nl! 
本 定理 的 证 明 方 法 有 上 典型 意义 . 
为 了 应 用 方便 ， 我 们 给 出 以 下 等 价 定 义 : 
定义 : 一 计数 过 程 {N(t),t > 0} 称 为 参数 是 》 时 齐 Poisson 过 程 ， 若 满足 : 
1° N(0)= 0; 
2” 是 独立 增 量 过 程 ; 
3” Ys,t>>0,N(s 二 +t) 一 NN(s) ~ P(X), 即 其 增 量 是 参数 为 At 的 Poisson 分 布 . 
证 : 留 作 读者 练习 . 





$ 2.2 相 邻 事件 的 时 间 间 隔 ， Poisson 过 程 与 指数 分 布 的 关系 


本 节 从 过 程 的 样本 函数 的 特性 来 刻画 Poisson 过 程 ， 从 而 揭示 它 与 指数 分 布 之 间 的 
内 在 联系 . 

设 {N(t),t > 0} 是 一 计数 过 程 , N(t) 表示 在 [0,4] 内 事件 发 生 (或 “顾客 ”到 达 ) 的 
个 数 . 令 5 = 0,5， 表示 第 n 个 事件 发 生 的 时 刻 (n > 1), 立 ,= 5 一 S41 (n > 1) 表示 第 
(n 一 1) 个 事件 与 第 个 事件 发 生 的 时 间 间 隔 ， 用 式 子 表示 为 

So =0, 
bn =inflt :it bn NU Sn 1 


注意 ， 此 时 对 t > 0 ,下列 事件 等 价 : 
(N(t) 27n)= (5 <) 
(N(t) 二 n) 二 ( Sn < 万 返 Sn+1) 一 (CA t) (Sa < t). 


这 里 inf{t} 表示 集合 {t} 的 下 确 界 ， 即 集合 的 最 大 下 界 ， 例 如 inf{i :n= 1,2,.…}=0. 
则 Yt>>0,n>0, 有 {5 <={N(t) > n},{N(t) =n}= {Sn <t< Soil 
因此 ， 5,, 的 分 布 函数 为 : t+ <0 时 ，P(5,<=0:; 当 +>0 时 ， 





bE Ek 
P(Sa <t)= P(N(t) >n)=1-e*(>, 9 ) (2.2.1) 
k=0 
S55 的 p.df. 为 ， 
A(At)" 一 
fs,(t) = re To 
特别 是 当 n= 1 时 ， 有 32 


P(X1 <t) = P(S1 <t) = (1—e lyo) 


2.2 ” 相 邻 事件 的 时 间 间 隔 ， Poisson 过 程 与 指数 分 布 的 关系 





即 X1 ~ B( 和 ) 是 参数 为 》 的 指数 分 布 ， 那么 ，X2,… ,XX,,… 又 如 何 呢 ?它们 之 间 关系 
又 会 怎样 呢 ? 我 们 有 如 下 漂亮 的 结果 : 

定理 2.2.1 计数 过 程 {N(t).t > 0} 是 Poisson 过 程 的 充分 必要 条 件 是 {X,.n > 1} 是 
独立 同 参数 为 \ 的 指数 分 布 . 

证 : 先 证 必要 性 . 步 又 如 下 : 

第 一 步 求 (51. 2,… , Su) 的 联合 概率 密度 . 令 五 < 已 < … < 如: 取 充 分 小 的 > 0， 
使 


h h h 
<nits tn stn<tnty 


| 


LD 1 达 1 十 了 < 2 F< 二 
由 


h h h h h h 
i 
全 3 SI1 Sta<t 7 S32<t+3< <t 了 SS < 加 十 了 | 





={N(6 2)=0,N(t + 2)— Nt 2)=1, 
No — 2)— NG +L)= 0 Nlta + 3)— Nba — 3)=1} UI 
其 中 
H, = {NG — £) =0, Nt 7) N(t1 2) =1 二 一 (ts 入 


h h h h h h 
Pl F< tta<t -stts<<th- FIstnta} 


=(Ah)"e- Ntn tn) 下 o(h") EE 和 ne 一 Atn .hn 下 o(h"). 


所 以 (51, 52,… , 5%) 的 联合 概率 密度 函数 为 : 


Me-Nr, 0<ti<to < <t 
g(t1,t2,: 二 了 2 
0， 其 它 . 


第 二 步 求 (X1, XX，,…… ,和 ) 的 联合 概率 密度 ， 注 意 到 X， = 5S, 一 Si mn > 1), 令 
vn 二 tn 一 tn-1; 则 变换 的 雅 可 比 行列 式 为 


1 0 0 0 
1 1 0 0 
O(t1, t2,: ,tn) 
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于 是 (Xi1, 久 2,… Xi) 的 联合 概率 密度 为 
A ) 和 ne 一 A(z1 十 z2 十 … 十 2m)， zi>0.1<i<n, 
C1, C2 ,Cn) = 
TZ1, C2, ， 0 其 它 . 
由 上 可 得 X; 的 概率 密度 为 fi (zw) = Xe ***, zx 之 0,1<k<n. 于 是 
f(z1, F2, CA 区 2 II fr (Lr), 
k=1 


即 证 明了 (Xi,1 <n) (ER) 独立 同 指数 分 布 ， 必要 性 证 毕 . 
下 面 证 明 充分 性 . 设 {Xi,k > 1} 独立 同 指数 分 布 . 令 So = 0,51 = X1,… ,5 = 
Dx_1 Xk, 对 Yt>0, 定 义 
N(t) = sup{n: Sn <t,n=0,1,2,...,}. 
由 上 定义 可 验证 {N(t),t > 0} 是 计数 过 程 ， 下面 仍 分 三 步 证 明 它 是 Poisson 过 程 . 
第 一 步 : 求 (51, 52,.… , 5;) 的 联合 概率 密度 及 N(t) 的 分 布 . 注意 到 证 必要 性 第 二 步 
的 逆 过 程 仍 成 立 ， 即 由 X1, 了 X2,… ,Xn 的 联合 概率 密度 


nn 
oaza En) = [Ne ™™, wr>01<k<n, 
二 


经 D1 = X1,.' ,Sn = 2 Xn， 可 得 D1,02,° On 的 联合 概率 密度 为 


Me Nr", 0<ti<to Let, 
glti, to, tn ) = 





0， 其 它 . 


由 上 可 得 95。 的 分 布 为 








Zi CX 
P(S, <t)=1-e (1+ M+ 1 
故 入 nn 
PN = 攻 闪 三、 ce- 


第 二 步 : 证 平稳 性 ， 这 里 只 写 出 对 > 1 的 证 明 ， 利 用 全 概率 公式 ， 有 


P(N(s+t)— N(s)= 7n)= SN P(N(s) =k,N(s+t)= k++n) 
k= 二 0 





oo 
> ,PS <s < Sir < Sirn < stt< Skinti) 
k=0 


=P(s < S11 Sn < st+t< Snt1) 


we 攻 n n++1 
+ PlSk < s < Sr++ Xnti < Shi Xrti < stt< St) XrtilSy = uadP(S: < u) 
R=1"0 i=1 34 i=1 





=P(s<S1 < <s+t< 1)+ > Pls—u<S1<S, < sit—u< Sr)dP(S, <u) 
k=1"0 


2.2 ” 相 邻 事件 的 时 间 间 隔 ， Poisson 过 程 与 指数 分 布 的 关系 


又 
s+t n ?2 十 工 
Pls < SS1 < ,<st+t< nr1) | P(>， Xi < s+t—v< DXilX1 = v)Ae do 


s+t 
可 | P(Si,_1 < s+t—v < SMe- Nady 
EE 


s+t n— 
3 [A(s 三 Ed eM(stt-v) Noe- 
nC—1)! 


6)" asty) 
nl 


类 似 的 P(s 一 w< Si1<Sn,<s+t+tou < Sati)= Qe-Astt-), 故 





At)” “(X22 E 
P(N(s+t)— N(s)= 7n) 0 CE 二 / OW at wgu 
o nl! 





(At)” e— 和 (s+t) 站 (At)” eMNstt) (es 2 1) 


nl! nl 





( 注 : 对 n=0 傅 形 类 似 证 明 ， 留 作 读 者 练习 ) 
第 三 步 : 证 增 量 独立 性 . 为 突出 方法 ， 这 里 仅 证 Vs,t > 0, N(s) 与 N(s+t) 一 N(s) 相 
互 独立 ， 即 证 Yn,mr>0 有 


P(N(s) =m,N(s+t)— N(s}=n)= P(N(s)} = mm})P(N(s+t)— N(s)= 7n) 
只 写 出 m> 1 与 n>1 的 情形 ， 其 它 可 类 似 证 之 . 


P(N(S) 2 mN(s 十 二 ) N(s) 一 n) 一 P(Sm < §< Sm+1 < md < 3 二 +t< Sm+n+1) 


n n+l1 
P(s = Xm+tl < SY < s+t—u < DY Xm+tilSm < uj)dP( Sm < u) 
1 


> (At)” AuaHACO -wy 


上 

3 Pl(s—-u SH < smutt< SradP(sm <u) 
0 
| 


nl! (m— 1)! 


_ Qs)™ -As (Mt)” oat 
mi! nl 





=P(N(s)=m)P(N(s+t)— N(s)=n) 
35 
由 Poisson 过 程 的 定义 知 ， Yt2 > 妇 >0,N(t2) 一 NN(t1) >0, 即 N(t2) > N(ti), 说 明 


Poisson 过 程 的 样本 函数 N(t) 是 t 的 单调 不 减 函 数 . 由 (N(t)=n)= (5S, <t< 5n+i) 知 
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N(t) 是 跳 唉 函数 , 即 当 5,, <t < Snti 时 NNW(t) = nn 是 一 常数 , 而 仅 在 t= 5%, (n= 1,2,…) 
处 跳跃 ， 且 相 邻 的 两 次 跳跃 时 间 间 隔 {X,,n > 1} 相互 独立 同 指数 分 布 (参数 为 和 > 0). 
这 就 为 Poisson 过 程 的 计算 机 模拟 及 其 统计 检验 提供 了 理论 基础 与 方法 . Poisson 过 程 
的 样本 函数 如 图 2.2.1 所 示 . 


$ 2.3 剩余 寿命 与 年 龄 


本 节 再 从 不 同 的 角度 刻画 Poisson 过 程 的 若干 重要 特性 . 

设 N(t) 表示 在 [0,4] 上 事件 发 生 的 个 数 . 5; 表示 第 ”个 事件 发 生 的 时 刻 ， 那么 ， 
Swlt) 表示 在 上 时刻 前 最 后 一 个 事件 发 生 的 时 刻 ， Sw(w+1 表示 时刻 后 首次 事件 发 生 的 
时 刻 ， 注 意 这 里 SN 与 SN(w+1 的 下 标 N(t), N(t) 十 1 是 随机 变量 ， 令 


W(t) =SN0)+1 = 





V(t) = 一 SN 
V(t) W(t) 
Pe 
0 SN t SNo+l 


W(t) 与 V(t) 如 上 图 所 示 . 为 了 解释 W(t) 与 V(t) 的 具体 意义 ， 设 一 零件 在 上 = 0 时 
开始 工作 ， 肴 它 失 效 ， 立 即 更 换 ( 设 更 换 所 需 的 时 间 为 零 )， 一 个 新 零件 重 又 开始 工作 ， 
如 此 重复 下 去 ， 记 5,, 为 第 ”次 更 换 时 刻 ， 则 XX, = 3 一 5,_1 表示 第 n 个 零件 的 工作 
寿命 ,于 是 W(t) 表示 观察 者 在 时 刻 t 所 观察 的 正在 工作 的 零件 的 镜 余 寿命 ，V(t) 表示 
正在 工作 的 零件 的 工作 时 间 ， 称 为 年 龄 . 还 可 以 有 别 的 解释 : 阁 5,, 表示 第 ” 辆 汽车 到 
站 的 时 刻 ， 某 一 乘客 到 这 该 站 的 时 刻 为 二 则 Wg9 表示 该 乘客 等 待 上 车 的 等 待 时 间 者 
Sn 表示 某 地 第 了 次 发 生地 震 的 时 刻 ， 则 Svtn+i 表示 上 时 刻 以 后 直到 首次 地 震 的 时 刻 ， 
W(t) 表示 上 时 刻 后 直到 首次 地 震 之 间 的 剩余 时 间 ， 等 等 . 故 称 W(t) 为 剩余 寿命 或 剩余 


2.3 ”剩余 寿命 与 年 龄 

时 间 ; 称 V(t) 为 年 龄 . 显然 ， 研 究 到 (), V(t) 的 特性 及 它们 的 关系 很 有 意义 ， 
由 定义 知 vVt> 0,W(t) >0,0<V(t) <i. 
定理 2.3.1 设 {N(t),t > 0} 是 参数 为 和 的 Poisson 过 程 ， 则 : 
1” W(t) 与 (Xn,n > 1) 同 分 布 即 


P(W(t) <£z)=1—exp(—-Mz), z>0. (2.3.1) 


2” V(t) 是 “ 截 尾 ” 的 指数 分 布 ， 即 














P(V(t) < 7)= | 1 (2.3.2) 
1, ft 
证 : 由 
{W(t) > z}= {N(t+z)— N(t) = 0} 
及 
i | {N(t)— N(t—7z)=0}, t>7z, 
0 t<z. 
即 得 所 要 结论 . 
定理 2.3.2 若非 负 7.v.X(n > 1) 独立 同 分 布 F(z), 则 对 Vz > 0,t>0 
t 
PIW(t) > zx)=1— F(z+t) +/ PIW(t—u) > 2)dF(u) (2.3.3) 
0 
证 : 由 条 件数 学 期 望 
中 55 
Pw >«)= | P(WI(t) > z|X1 = s)dF'(s) (*) 
0 


下 面 讨论 P(W(t) > zlXa = s), 由 W(t) 窟 义 
(1) 当 s>t+z 时 P(W(t) > z|X1=s)=1; 
(2) 当 +< ss<s 二 上 时 ，P( 丈 (图 > z|X1=s)=0; 
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虔 





(3) 当 s<t 时 ， 由 X(n > 1)iid, 得 


P(W(t) > z|X1 = s)=P(SN()+1—t> £|X1 = 8) 
a 
PL》 Xi—(t—s)> zlX1=s) 
1=2 











20 m1 

= P(X;—(t—s)>2,N(t) = mx = s) 
m=1 了 三 2 
20 m+1 

es P(X;— t—s)> zm <t< SmiilX1= s) 
m=1 章 过 六 
20 m+1 

= PY Xj;-(t—s)>2, D2 <t—s< Sy 
js 学 三文 党 各 
co ?十 1 

= >, P(y> Zi 一 人 Sx) 
m=1 壮志 全 二 二 二 2 


=》 P(Sm—(t—s)> 2,Sm-1<t—s< Sm) 


站 


SY pl 














由 (1),(2),(3) 即 得 (2.3.3). 
我 们 可 以 用 W(t) 与 Xn 的 关系 来 刻画 Poisson 过 程 . 
定理 2.3.3 阁 对 Vt> 0,W(t) 与 X,(n > 1) 同 分 布 F(z), )=0, 则 {N(#),t>> 
0} 为 Poisson 过 程 . 
证 : 令 G(z)=1- 了 F(z) = 了 P(W(t) > 2z), 由 式 (2.3.3) 及 (0) =0 得 ,对 Vz > 0,t> 0， 
有 
G(rz+t) = G(r)G(t) (2.3.4) 


因为 F(x) 是 单调 不 减 ， 右 连续 函数 . 所 以 G(z) 是 单调 不 增 ， 右 连续 函数 . 则 对 (2.3.4) 
两 端 对 > 求 导 ， 得 Gi(z 二 们 = G4(z)G(t). 又 Gi(z+ 科 = Gi(z 十 t) 所 以 





Gz+t) = G2)G(t) 


令 z=0, 则 G1(t) = G(0)G(#). 
令 和 = -G'(0). 由 于 G(x) 单调 不 增 ， 所 以 和 > 0: 又 因 F(zx) 为 分 布 函数 ， 不 可 能 为 党 
数 ， 从 而 和 去 0; 再 由 G(0) =1- PRO = 得 38 





G(t)=e-”t 
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即 
F(z)= P(X, <z)=1-e” (>0) 
再 由 定理 2.2.1 知 {N(t),t > 0} 是 Poisson 过 程 . 口 
该 定理 最 早 在 1972 年 由 K.L.Chung 得 到 . 说 明 W(t) 与 X,(n > 1) 同 指数 分 布 ， 是 
Poisson 过 程 特有 的 性 质 . 本 定理 可 应 用 于 检验 {N(t),t > 0} 是 否 为 Poisson 过 程 . 
类 似 地 ， 可 以 用 B[W(t)] 与 t 无关 或 (W(t),V(t)) 的 联合 分 布 来 刻画 Poisson 过 程 . 


$ 2.4 到 达 时 间 的 条 件 分 布 


本 节 讨 论 在 给 定 WU = nn 条件 下 ，51, Ss,… ,5 的 条 件 分 布 有 关 性 质 及 其 应 用 . 
先 看 下 面 定理 : 
定理 2.4.1 设 {N(t),t > 0} 是 Poisson 过 程 ， 则 对 Y0 < s < 十 


P(X < s|N()=1)=7. (2.4.1) 
证 : 


POX, < swg = _P(X1 <sNO)=1) _ P(N(sS)=1,N(t) — N(s)=0) 








P(N(t)=1) P(N(t)= 1) 
_ (As)e-*s 5 Ee— 和 (t—s) 3 百 
全 (Mt)e-*t 一 沁 





这 定理 说 明 ， 由 于 Poisson 过 程 具有 平稳 独立 增 量 性 ， 从 而 在 已 知 [0, 上 有 一 事件 
发 生 的 条 件 下 , 事件 发 生 的 时 间 Xi1 在 [0 上 是 “等 可 能 性 的 >， 即 它 的 条 件 分 布 是 [0 如 
上 的 均匀 分 布 ， 自然 ， 我 们 要 间 : (1) 这 个 性 质 是 否 可 推广 到 N(t) = n,n > 1 的 情形 ? 
(2) 这 个 性 质 是 否 是 Poisson 过 程 特 有 的 ?” 换 名 话说: 本 定理 的 逆 命 题 是 否 成 立 ? 为 回答 
(1), 完 讨论 顺序 统计 量 的 性 质 . 

设 二 ,了 瑟 ,… ,了 是 独立 同 分 布 , 非 负 的 随机 变量 , 密度 函数 为 f(y), 记 Yi) < Yi2) < 
… < Yin) 为 相应 的 顺序 统计 量 ， 容 易 看 到 ， 对 Y0 < yi < yz <… < wn, 取 充 分 小 h>0 
,使 


0< < t+h<y <yth < ye Yih yy < yath, 
则 


{yi < Yn) < yi t+ hy < Ya) < 萎 十 六 Yn < Yn) < yn + h} 


= UD) fF <nthy ,<p+th Yn < < yn+ 


(i1,2,. ,in) 
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等 式 右边 各 事件 互 不 相 窒 ， 得 
lm Ply1 < YY) < yi +h, vy < Yo) < yo + hh, ,Yn Yt) < yn + h)/h" 
一 = lim nm P(y < ¥ 11 < yi+h,vy < Y, < yt hh, Yn < 六。 < yn t+ h)/h® 
由 此 可 知 顺序 统计 量 Yj),Y2),… , Yi) 的 联合 概率 密度 为 


nT fy), 0O<Hn<y < < 


f(y ,2 ,Yn) = 
1:Y2 | 0 其 它 


车 {了 ,1 <i<n} 在 [0, 旭 上 独立 同 均匀 分 布 ， 则 其 顺序 统计 量 Yy,…Y,) 的 j.p.d4 为 


0， 其 它 . 


内 ， 0<y<y < <yn <t, 
f(y1, ya Vn) = 


对 问题 (1), 有 以 下 有 用 的 定理 : 
定理 2.4.2 设 {N(t),t > 0] 为 Poisson 过 程 ， 则 事件 相继 发 生 的 时 间 51, 52,… , 5。 
在 已 给 tt) =n 下 的 条 件 概率 密度 为 


n! 

,0<ti<tso < <t, <1, 
fltitas tn) = se 7 (2.4.2) 
0， 其 它 . 


证 : 对 V0=t0< 本 << 之 之 +1 = 二 tt 取 ho= +41 = 二 0 及 充分 小 的 hi, 使 
ti+h<tinl<i<n,N: 








Plti <Si <tithyl<i<n|N(t)=n) 
_ PON(ti + hi)— Nt)=1,1<i<n, Ntr)— Nt+h;))=01<7<n) 
P(N(t) =n) 
_ Qhi)e M1... (Mn)e Ah, te A(t—hi—h2—:…—hn,) 





1 
nl! 

= —hih2…h 
Atr 2 ns 
Game 瑟 


因此 
P(ti < Si Stithyl Si<nNt)=n) nl! 
hiha 人 hs 和 bn 





所 以 
|) 0<t<to < <tn <t, 
flti1,t2, ,tn) = | 0, 其 它 . 
本 定理 说 明 在 N(t) = 条 件 下 51,52,… .30 的 条 件 分 布 函数 与 m 个 在 [0.1 上 相互 
独立 同 沟 匀 分 布 的 顺序 统计 量 的 分 布 函数 相同 . 
对 问题 (2), 即 道 命题 ， 有 以 下 定理 : 


2.4 ”到 达 时 间 的 条 件 分 布 


定理 2.4.3 设 {N(t),t > 0} 为 计数 过 程 ，X; 为 第 ”个 事件 与 第 ”- 1 个 事件 的 时 
间 间 隔 ， {X,n > 1} 独立 同 分 布 T(z) = P(Xn <z), 若 F0)=0, 且 对 Y0<s<t 有 


P(X1 < s|N(t) =1)=7 


S of 
+ (0 < t), 


则 {NWN(#),t > 0} 为 Poisson 过 程 . 
证 : 由 题 意 : P(X < sIN(s+4)=)= 二 :PC < zsN(s+2)=1)= :所 以 





P(X1 < sIN(s+2)=1)+ P(X1 < sIN(s+ 7£)=1)=1 (2.4.3) 
又 


P(A1i < SX1 H+ AI AX9) 


P(X1> ssIN(s+z=1)= P(X1 < s+7x < Xi+tX) 


利用 全 概率 公式 ， 得 
P(X1 < s,X1 < s+r< Xt+X)= /et — F(s+z— u))ar(u) 
P(X1 < s+% < Xi+X2)= ei — F(s+z— u))aF(u) 

由 (2.4.3) 得 : 


六 $s 二 并 


1 (1—F(s+2£—u))dr(u)+ J F(s+w— udr(u)= / (1—F(s+z—u))dr(u) 
0 0 0 





所 以 
/ CG- Peta-war)= / (1—F(s+z—u)aF(u) 
0 r 


化 简 上 式 ， 得 F(s) + F(x)— F(s)F(z)= F(x+s). 
所 以 (1 一 (F(z+s))=(1- PF(s)(1— F(7), 令 G(z)=1-F(z), 则 


Glz + s) = G(z)G() 


类 似 于 定理 2.3.3 证 明 中 (2.3.4) 式 以 后 的 证 明 部 分 ， 即 得 结论 . 口 
定理 2.4.4 设 {N(t),t > 0} 为 计数 过 程 ，{X.n > 1} 为 相继 事件 发 生 的 时 间 间 隔 ， 
独立 同 分 布 ， F(x) = P(X, < 7z), 若 BX, < >%,F(0)=0, 且 对 Yn>1.0<s<t, 有 


Pl Ne 


则 {N(t),t > 0} 为 Poisson 过 程 . 
证 明 从 咯 . 六 
注 : 利用 以 上 结果 ， 检 验 Poisson 过 程 时 不 需要 知道 参数 入 . 
二 个 例子 : 
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例 1， 设 到 达 火 车 站 的 顾客 流 遵 照 参数 为 的 Poisson 流 {N(),t > 0}, 火车 t 时 刻 
离开 车 站 ， 求 在 [0, 到 达 车 站 的 顾客 等 待 时 间 总 和 的 期 望 值 . 
解 : 设 第 ;个 顾客 到 达 火 车 站 的 时 刻 为 5;, 则 [0,4 到 达 车 站 的 顾客 等 待 时 间 总 和 为 


N(t) 


S(t) = > (一 9). 


二 


N(t) 
E(S(HIN(t) = n) =B{) -SN = n} 
i 
=E[>_(t — Si)|N(t) = 1] = nt — EI, Si|N(t) = n), 
三 入 


全 


仍 记 {于 ,1 <i<n) 为 [0,4 上 独立 同 均匀 分 布 的 rt.v.. 则 


BY SNGO = = 了 (> Yij) (由 定理 2.4.2) 


i 二 1 
故 
二 nt 
wl — SS)IN(t) = n} = 
所 以 
oo N(t) 
BIS() = (PIN(t) = 可 By (t— S)IN(t) =]) 
n=0 i=1 
= P(Nt) =n) 了 BN) = 口 


例 2， 设 一 系统 在 0,4] 内 承受 的 冲击 数 {N(t),t > 0} 是 参数 为 的 Poisson 流 . 第 
; 次 冲击 受 的 损失 为 D;, 设 {Di,i > 1} 独立 同 分 布 ， 与 {N(t),t > 0} 独立 ， 且 损失 随时 
间 按 负 指数 衰减 ， 即 + = 0 时 损失 为 D, 在 t 时 损失 为 De-*',a > 0. 设 损失 是 可 加 的 ， 
那么 在 t 时 刻 的 损失 之 和 为 


NO) 
4 一 alt 一 5i) 
€(t) = 0 人 


其 中 5; 为 第 ; 次 冲击 到 达 的 时 刻 ， 试 求 Bt(t). 


2.4 ”到 达 时 间 的 条 件 分 布 


解 : 先 求 条 件 期 望 ， 














N(t) 
(t)|N(t) = 1} =BE[》, Die- tS) N(t) = n] = D> Die- tS)|N(t) = 中 
Vs 
= stpilnt) [e- "(tN(t) =n] 
=ED.e-°t > Ele®®:|N(t) = nl]. 
$1 
记 也 ,了 D,… ,六 为 [0, 上 独立 同 均匀 分 布 的 1z.v., 则 由 定理 2.4.2, 有 
Bg{Y expla9; )|N(t) = 二 n} -2 exp(aY¥i))} = Bf exp(aY¥;)} 
[i 法 
t 1 
=n exp(awz) . 一 一 [exp(at) 一 1|. 
所 以 
BE NG) = nm) = [1 exp(-at)| ED. 
即 S 
E(E(t)|N(t)) = 二 — exp(—at)] ED 
. 入 五 刀 
B{E(D} = BLBEWN NN) = 一 一 [L- erp(-od)] 


关于 到 达 时 刻 ， 我 们 有 以 下 有 用 的 定理 : 
定理 2.4.5 设 {N(t),t > 0} 是 参数 为 和 的 Poisson 过 程 ，S;,k > 1 为 其 到 达 时 刻 ， 


则 对 任意 的 [0, sc) 上 的 可 积 函 数 f 有 
z[> 7 1 ) | : flt) dt. 


慨 宇 二 


当 t+>0 时 ， 5 = inf{t: N(t)=n}, {5, <t}={N(t)>n} 可 得 


(2.4.4) 


证 : 由 (2.2.1)， 





P(S,, < 1) 二 P(N(t) > n) 三 3 2 EA 


六 三 好 


因此 S,。 的 概率 密度 为 : 
co Ca 1) 二 | 和 
过 人 








汪汪 多 

者 设 f 非 负 ， 由 上 式 得 
tC 1) 
BUS 人 0 


Splf(S n) 1 ee -Xt dt ea f(t) dt. 


我 过 人 


crxt 
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对 一 般 的 f, 将 已 证 结果 用 于 f+ = max(f,0) 及 广 = max( 一 f.0), 即 可 知 (2.4.4) 式 对 
f= f+ 一 了 成立 . 口 
下 面 我 们 利用 定理 2.4.5 提供 上 面 例 2 结果 的 另 一 种 求解 方法 若 取 


f(s) = Tiog(s)e "tt"), 


则 
N(t) 
SD = 于 Teapee- at 一 = Di 
于 是 
IEC] -=D a, f(5i)] = BID]B|> f(5i) 
i he ds 二 a s 一 AE[D] WR eat 
一 op f(s)ds a ds a [1 有 
§ 2.5 Poisson 过 程 的 模拟 ， 检验 及 参数 估计 
1. 模拟 


由 前 面 讨论 知 ， Poisson 过 程 的 样本 轨道 是 单调 不 减 的 跳 路 函数 ， 相 邻 两 次 的 跳跃 
间隔 X(n > 1) 独立 同 指数 分 布 (参数 和 > 0 ). 因此 ， Poisson 过 程 的 样本 函数 可 用 下 述 
步骤 模拟 : 

(1) 产生 [0,1] 上 均 义 分布 且 相 互 独立 的 一 串 随机 数 ， 记 为 {0,n > 1}, 这 在 计算 机 
上 是 能 够 实现 的 . 

(2) 令 Xi = 一 和 -1ln Ui (入 为 已 给 参数 ), 易 证 {X,n > 1} 是 独立 同 指数 分 布 随机 变 
量 . Sn = D1 RN 

3) 定义 NU 如 下 : N(tj =0, 如 0<t<S1,N(t)=n, 如 Sn <t< So 
0 就 得 到 {N(t),t > 0} 的 一 条 轨道 . 


2. 检验 


按照 Poisson 过 程 性 质 ， 要 检验 {N(t),t > 0} 是 否 是 Poisson 过 程 ， 可 转化 为 下 面 检 
EE 
1) 检验 {X,,n > 1} 是 否 独 立 同 指数 分 布 ; 
: vt > 0, 检验 W(t) 与 X,(n>1) 是 否 同 分 布 ; 
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(3) vt > 0, 检验 在 N(t)=1 E 51 = XI 是 否 是 [0, 引 上 的 均 义 分布; 

(4) 给 定 了 > 0, 检验 在 N(T) =n 下 51,52,… ,Sn 的 条 件 分 布 是 否 与 [0.T] 上 了 个 
独立 均匀 i 同 . 

这 里 仅 讨 论 最 后 一 种 的 具体 检验 方法 . 

提出 统计 假设 Ho : {N(t),t > 0} 是 Poisson 过 程 . 令 m = x_i1Sk. 当 Ho 成 立 ， 
由 定理 2.4.2 





n 也 nT 
BE{on|N(T) 一 n} 一 Bf>， yi)} E{S vy} 一 2 ， 
二 4 





n n T? 
D{on|N(T)=n}= D{D vol=D w= 
i=1 i=1 
其 中 {dl <i< n} ii.d. ¥ ~ U10,4] ® DY Yi) 5 了 为 其 顺序 统计 量 . 
| 人 a 
,Jim P{ 2 TIN(T) 和 lim P(e = 
即 对 充分 大 的 na, 有 


i 
e 3 du 








P( 且 < < sntal 从 (5) ]|IN(T) = n) TB(z). 
者 给 定 置信 水 平 a = 0.05, 则 当 
On i, ni 


时 ， 接 受 Ho, 否则 ， 拒 绝 Ho. 此 法 优点 在 于 不 要 求 已 知 入 . 


3. 参数 和 的 估计 

经 上 述 检 验 后 ， 如 接受 Ho, 则 认为 {N(t),t > 0} 为 Poisson 过 程 ， 进 而 要 求 : 由 已 
有 数据 如 何 佑 计 参 数 入 ? 
1) 极 大 似 然 估计 


设 {N(4),t > 0} 为 Poisson 过 程 , 给 定 7, 车 在 [0,T] 上 观察 到 $1.52,… ,Sn 的 取 值 
t1,t2, | ,tn < J, 则 似 然 函数 为 


L(ti, ta. | ‘tn, 和 ) 二 和 


仅 = 0, 即 得 和 的 极 大 似 然 估计 为 


注意 : 给 定 全 后 ， 则 落 在 [0, 7T] 上 的 个 数 ”是 随 观察 结果 而 定 的 . 
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(2) 区 间 佑 计 


仅 讨论 固定 ”的 情形 . 若 {N (tb),t > 0} 是 Poisson 过 程 , 则 由 定理 2.2.1, 5% = 8-1 Xx 
的 概率 密度 函数 为 : 
和 (AN i An 


、 n—l_,—A 人 t " 
n= (nC—1)! Pen BE (t 之 0), 





其 中 Tla) = /0 zo-!le-?dz 为 函数 ，T(n) = (mn 一 1)!. 因此 ，2X5, 的 概率 密度 函数 为 


(t) = ! 和 -1 (t>0) 
Yn i 2 学 了 (加) 3, 》 





这 与 x*(2n) 的 密度 相同 ， 故 2^5, = x*(2n). 取 置 信和 度 1 一 a, 则 
P (x2/2(2n) AS， 这 对 | = 


故 置信 度 为 1- as 的 的 区 间 佑 计 为 


X272(27) xX? a (2n) 
25n : 29n |. 








5S, 由 数据 得 到 ， X2 /(2n) 及 好 _。 (2n) 查 表 得 到 . 


Poisson 过 程 的 几 种 推广 . 

在 前 几 节 讨论 中 ,我 们 看 到 Poisson 过 程 有 许多 独特 的 性 质 . 这 与 它 的 定义 中 加 了 许 
多 严格 限制 有 关 . 许多 实际 问题 中 并 不 者 满足 这 些 条 件 . 因此 ， 有 必要 讨论 定义 中 某 些 
条 件 放宽 后 的 情形 ， 这 就 是 它 的 若干 推广 情形 . 


§ 2.6 非 时 齐 Poisson 过 程 


先 看 放宽 $ 2.1 定义 中 平稳 性 即 是 常数 的 限制 . 

定义 一 计数 过 程 {N(t),t > 0}, 称 它 为 具有 强度 函数 {A(t) > 0,t > 0] 的 非 时 齐 
Poisson 过 程 , 若 满足 : 

1” N(0)=0; 

2。 {NN(t),t > 0} 是 一 独立 增 量 过 程 ， 

3 ”对 充分 小 的 hh > 0. 有 


P(N(t+h)— N(t)=1)=AM(t)h + o(h), 
P(N(t+h)— N(t) > 2H46o0(h). 


如 令 m(t) = fi A(s)ds, 其 中 A(t) > 0, 则 有 以 下 : 


27 复合 Poisson 过 程 


定理 2.6.1 若 {N(t),t > 0} 是 非 时 齐 具 有 强度 函数 {A(t),t > 0} 的 Poisson 过 程 ， 
则 Ys,t> 0， 
[m(s+t) —m(s)]" 


P(N(s+t)— N(s)=n)= i exp{—[m(s+t)—m(s)]} (n> 0). (2.6.1) 





该 定理 的 证 明 与 定理 2.1.1 的 证 明 类 似 ， 留 给 读者 作为 练习 . 

我 们 把 $ 2.1 定义 的 过 程 称 为 时 齐 (homogeneous) Poisson 过 程 ， 显然， 在 定理 2.6.1 
中 ， 如 令 A(s) = 和 即 为 定理 2.1.1. 事实 上 ， 非 时 齐 Poisson 过 程 与 时 齐 Poisson 过 程 也 可 
通过 变换 ， 互 相 转 化 . 

定理 2.6.2 

1” 设 {N(t),t > 0} 是 具有 强度 函数 {A(s) > 0,s > 0} 的 非 时 齐 Poisson 过 程 ， 令 
m(t) = 太 和 (s) ds, m-1(t) 是 m(t) 的 及 函 数 ， 即 


m-1(w) = inf{t :t+t > 0,m(t) > u,v > 0}, 


记 MW) =N(m-1(w), 则 {MM(w),w > 0} 是 时 齐 Poisson 过 程 . 

2。” 设 {M(w),w > 0} 是 时 齐 Poisson 过 程 ， 参数 和 = 1. 若 给 定 强度 函数 {和 (s) > 
0,s > 0}, 令 mm(t) = hh A(s) ds, N(t) = M(m(t)), 则 {N(t),t > 0} 是 非 时 齐 的 具有 强度 函 
数 {A(s),s > 0} 的 Poisson 过 程 . 

证 明 留 给 读者 作为 练习 . 


§ 2.7 复合 Poisson 过 程 


定义 设 {i,i > 二 是 独立 与 了 同 分 布 的 随机 变量 序列 ， {入 (4),t > 0} 为 Poisson 
过 程 ， 且 {N(),t> 0} 与 { 玉 ,i> 4 二 独立， 记 


N(t) 


X(t) = YY,, 
jel 


称 {X(t),t > 0} 为 复合 Poisson 过 程 ( Compound Poisson Process). 

如 {N(t).t > 0} 表示 粒子 流 ， N(t) 表示 [0,4] 到 达 的 粒子 数 ， 六 表示 第 i 个 到 达 
粒子 的 能 量 ， 则 X(t) 表示 [0, 内 到 达 粒 子 的 总 能 量 . 者 {N(t),t > 0} 表示 一 顾客 流 ， 
了 表示 第 i 个 顾客 的 行李 重量 ， 则 {X(t),t > 0} 表示 [0, 内 到 达 的 顾客 行李 总 重量 ， 等 
等 . 
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为 求 和 (t) 的 窍 ， 先 求 它 的 窍 母 函数 : 











n=0 
co (At)” 本 oc (Mt)" 下 
二 2 me Mplexp{u(i+ 斑 十 … 十 了 ))] = = me a (Blexp{u¥i}]) : 


令 py (wu) = Bf{exp(uY)} 为 Y 的 窍 母 函数 ， 则 


pi(u) = > ME = exp{M(9y (wu) — 1)}. (2.7.1) 
n=0 


对 上 式 在 “= 0 求 导 ， 得 
E{X(t)} = $1(0) = A EY, (2.7.2) 
及 
D{X(t)} = ME(Y’). (2.7.3) 
特殊 情况 : 若 {pi,i > 1} 为 独立 同 分 布 , 取 什 为 正 整 数 的 随机 变量 序列 , 且 与 Poisson 
过 程 {N(t),t > 0} 独立 ， 记 


N(t) 


X(t) = 》 pi, 
Ea 


则 称 {X(),t > 0} 为 平稳 无 后 效 流 . 
容易 理解 ，XX(t) 可 描述 成 批 到 达 的 “顾客 流 ”， 即 每 次 同时 到 达 的 顾客 数 是 随机 的 . 
它 在 排队 系统 中 大 有 用 场 . 





8 2.8 条 件 Poisson 过 程 





把 参数 推广 为 一 正 的 随机 变量 的 情形 ， 即 下 面 所 述 的 条 件 Poisson 过 程 . 

定义 设 和 是 一 正 的 随机 变量 ， 分 布 函数 为 G(z),z > 0, 设 {N(t),t > 0} 是 一 计数 
过 程 ， 且 当 给 定 A = 和 条件 下 ， {NN(t),t > 0} 是 一 Poisson 过 程 ， 即 Ys,t > 0,mn Emo= 
{0,1.2，…… 上 入 >0, 


P{N(s+t)— N(s)=n|A = A}= ee et (2.8.1) 





称 {N(t),t > 0} 是 条 件 Poisson 过 程 . 

注 : 这 里 {N(t),t > 0} 不 是 增 基 独立 的 过 称 8 由 全 概率 公式 ， 可 得 
P{N(s+t#)— N(s)=n}= I el (2.8.2) 
0 


nl 
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$ 2.9 更 新 过 程 


由 定理 2.4.3 知 ， 一 个 计数 过 程 ， 若 它们 相 邻 事件 到 达 的 时 间 问 隔 X,, 是 指数 分 布 ， 
则 此 过 程 为 Poisson 流 . 现在 ， 我 们 来 考虑 X, 是 一 般 分 布 时 的 情形 ， 这 便 是 更 新 过 程 . 

定义 设 {Xi,k> 1} 是 独立 同 分 布 , 取 值 非 负 的 随机 变量 , 分 布 函数 为 F(z),x > 0， 
且 F(0)<1, 令 50=0.5,= x_iXi: 对 Vt>0, 记 


N(t) = sup{n : $, < tt}, 


称 {N(t),t > 0} 为 更 新 过 程 . 
显然 ， 更 新 过 程 是 一 计数 过 程 ， 并 有 


I (2.9.1) 
I (2.9.2) 
记 本 (z) 为 5, 的 分 布 函数 ， 由 8, = "_， Xi, 易 知 
F(z) =F(72), 
Wi 2 
0 


即 Pl (z) 是 十 以 (£2) 的 n 重 卷 积 ( 简 记 Fn = Pn-i+* F). 记 ml(t) = 一 E{N( t)}, 称 ml(t) 为 更 
新 函数 . 
定理 2.9.2 vt> 0， 


mlt) = >, Fn(d) (2.9.3) 
n=1 
证 : 
ml(t) = Snp{N) =n} = > P{N(t) > 1n} = > P(S,, <t). 
n=0 n=1 n=1 
即 
和 3 Blt 口 
n=1 

推论 若 对 vt> 0,F(t)<1, 则 

m(t) < FA9)(1 — Flt). (2.9.4) 


证 : 由 归纳 可 得 (t) < (F(t))”, 再 利用 (2.9.3) 即 得 . 口 
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定理 2.9.3 Vt > 0,mlt) 满足 下 列 更 新 方程 
t 
m(t) -=zoO+ 1/ m(t—u dF(u). (2.9.5) 
0 


证 : 由 (2.9.3) 得 


m(t) = P(t) + > F(t). 


将 下 式 











代入 即 得 (2.9.5) 式 . 
若 令 





从 (2.9.5) 易 得 


mh(s) = 0 (2.9.6) 
,1h(s) 
F(s)= Te (2.9.7) 


由 拉 氏 变换 与 道 变换 是 一 一 对 应 的 ， 可 知 F(t) 与 m(t) 亦 是 一 一 对 应 的 . 

更 新 过 程 的 最 初 物 理 原 型 是 零件 的 连续 更 换 ， 一 个 零件 在 零 时 刻 开 始 工 作 , 在 部 
失效 ， 然 后 马上 被 第 二 个 更 换 ， 一 般 ， 第 n 个 零件 在 -1 X; 时 失效 ， 随 之 马上 换 一 新 
零件 ， 通 常 假定 各 和 零件 寿命 是 独立 同 分 布 的 即 P(X < 2) = F(z), 显然 这 一 更 换 过程 中 
N(t) 表示 在 [0.4] 的 更 新 数目 . 现在 ， 更 新 过 程 在 生物 遗传 ， 排 水 系统 ， 可 靠 性 工程 ,， 人 
口 增长 ， 经 济 管理 等 领域 有 着 广泛 应 用 . 


$ 2.10 若干 极限 定理 与 基本 更 新 定理 


令 几 = BEX, 由 F(0) <1 易 证 41> 0, 我 们 有 : 


命题 2.10.1 
2 人 和 站 a (2.10.1) 
no Nn 
或 记 为 


lim 人 = 30.s.). 


0 一 co Nn 


证 : 由 强大 数 定律 即 得 . 口 
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推论 1: 
P( lim 3 = 0%)=1 (2.10.1a) 
证 : 由 Xn>=0 有 nl1 时 Sn 1, 故 limy ed Dn 存在 . 下 证 本 二) 二 


5 


用 反 证 法 ， 若 不 然 ， 存在 M> 0, 有 Pllim, ~ Bn < M) =@>0, 得 (Ulin se = 
0)>aw>0, 从 而 Plin ss 芋 了 由 >a>0 与 Pllimn 至 = 人 >0)=1 相 矛盾 因 
此 (2.10.1a) 式 得 证 . 口 





推论 2: vt > 0， 
ml(t) = Dj F(t) < co 
疗 皇 志 
证 : 当 t=0 时 ， 
F(0 
m(0) < i < co. 


下 面 考虑 上 > 0, 由 F(t) 的 单调 性 ， 易 知 本 4m(t) < 到,()(t), 从 而 有 
Frtm(t) < (BOP Rt), 1<m<r—l. 


又 由 PUinmnn vs 95 = >%) = 1 知 对 Vt > 0, 存在 充分 大 的 ">1, 使 P(5, >t)=6> 0， 
即 F(t)= P(S, <t)=1-B<L1. 于 是 

















mt) = DR) = DD Frm(t) < Dr(F(t))" Ft) = I < cc. 
五 二 1 让 n= 二 0 
记 NWN(%) =limnt < NWN(t), 则 有 : 
命题 2.10.2 
P(N(%)= <) = 1 (2.10.2) 
证 : 因 ~ 
{N(%) < 2%0} = Us = %} = (J){X, = sh 
n 二 1 下 
故 oc 
0< PNco<s)=PU ER = %) < > P(X, = 2%)=0, 
n=1 次 三 圭 
命 古 得 证 . 
命题 2.10.3 
NTN 
P (lim < 了 | 三 年 (2.10.3) 


证 : 记 
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则 由 P(4) = P(B) = 1 (命题 2.10.1 及 2.10.2) 易 得 P(4B)=1. 又 4BCO 得 P(0)=1. 
再 由 


SN(t) St < SIN)+r1 





SN(t) t SNw+t1 NW)+1 
N(t) Ni Nb+1 NO 


令 了 ={o:lin sz =, 则 对 VweC, 有 


,SN 
lim 外 


in SNo+t1 和 NOT1LI 
tc N(t) tow N(t 


一 i N41 Nt) 























即 CCD, 得 1= P(C) < P(D)<1. 故 P(D) = 1, 命题 得 证 

为 了 讨论 Wald 等 式 ， 先 引出 停 时 的 概念 . 

定义 设 {X,,n > 1} 为 随机 序列 ， 了 为 取 非 负 整数 随机 变量 ， 若 对 任 一 ”< 
{0,1,2,…}, 事件 {=n} 仅 依 赖 于 1, 闫 2,… 而 与 和 + 独立， 则 称 工 
关于 {X,n > 1} 是 停 时 (Stopping time, 或 称 Markov time). 

直观 意义 是 : 当 我 们 依次 观察 诸 XY, 以 NN 表示 在 停止 观察 之 前 所 观察 的 次 数 ， 如 果 
NV = n, 那么 我 们 是 在 已 经 观察 Xi,Xs,… ,XX 后 ， 还 未 观察 X,+1,X+a… 前 停止 观察 
的 . 

定理 2.10.4 (Wald 等 式 ) 设 {X,,n > 1} 独立 同 分 布 ， 人 = EX < cc 与 和 同 
分 布 ， 7 关于 {Xn,n > 1} 是 停 时 ， 且 BT < cc， 则 





了 
E(》 Xn) = (EX)(ET). (2.10.4) 


bi 


则 


T oa 
>», 二 和 过 》， 双人 1 


nS1 鹤 二 二 
由 于 {I = 0} {了 < n} > Weci{ } 仅 依赖 于 KT | 而 与 Xn ,nl 4 
独立 ， 且 [而 = 1} 二 {1(T = k)}° 也 与 广 n 全 HT， : 独立 ， 因此 了 与 Xn 独立 ， EE 
是 32 
E{In Xn} = (EXn){ El,)}, 
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co 


BC Ka) = 了 [2 Xln} = DEX) BL) 


n=1 她 写 二 Sl 








=EX. SEL,) = EX PT>n)= (EBX).(ET,). 


n= 二 1 物 三 这 








例 2.10.5 {Xn > 1} 独立 同 分 布 , 且 P(X =1)= P(X =0)=4 记 





nn 


T= min{n: > ,i= 1X;,= 10), 


可 验证 了 关于 {X,n > 1} 是 停 时 ， 若 X= 1 表示 第 ”次 试验 成 功 ， 则 了 可 看 作 是 
取得 10 次 成 功 的 试验 停止 时 间 ， 由 (2.10.4) 得 B{ZT_, Xs} = 3BT. 但 由 了 的 定义 知 
Xi 十 十 … 十 Xn 二 10, 故 ET = 20. 

例 2.10.6 {Xi,n>1}iid, 有 P(X,=1)=»p,P(X, =-1)=1-p=g>0, 记 

















T= min{n: 天 = 
i=1 
易 验证 了 关于 {Xn,n > 1} 是 停 时 ， 它 可 看 作 是 一 个 财 徒 的 停 时 ， 他 在 每 局 赌博 中 赢 一 
元 或 输 掉 一 元 的 概率 分 别 为 p 与 vd +T4 = 1), 且 决定 一 旦 说 一 元 就 轩 手 . 
当 p > 4 时 ， 由 第 三 章 可 以 证 明 ET < oc. 此 时 应 用 Wald 等 式 得 





(全 三 


从 而 BT = (pq)-1. 

当 P=4= :时 ， 若 应 用 Wald 等 式 有 EB(Xi 十 … 十 Xr) = (BX)(BT), 然而 ， 
BX = 0, 1 十 … 十 Xr 三 1. 从 而 得 出 矛盾 ， 所 以 当 p = 4 = 3 时， Wald 等 式 不 再 成 立 , 
这 就 得 出 结论 : ET = =， 

我 们 现在 转 到 更 新 过 程 {X%,n > 1} 及 N(t) = sup{n : ;1 Xi < ti 可 以 证 明 : 
N(t) 十 1 关于 {Xi,n > 1} 是 停 时 . 事实 上 ，{N(t)+1=7n}= {N(t)=7n-1}= {5,-1< 
t < 5%} 仅 依 赖 于 Xi1,… ,XX, 且 独 立 于 X41,…, 故 由 Wald 等 式 可 推 得 以 下 推论 : 

推论 当 忆 ZX =/< ec 时 

















ElSnwc+1] = Klm(t) 十 也， 口 (2.10.5) 


现在 我 们 可 以 证 明 以 下 定理 : 
定理 2.10.8 (基本 更 新 定理 )(The Blegentary Renewal Theory) 





lim 一 一 = (其 中 一 = 0)， (2.10.6) 


证 : 先 设 KL< Co， 由 SN(H+1 > 知 Hlm(t) 十 
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] > 二 得 


lim inf 


t 一 cc 和 





1 
m(t) 1 
及 


另 一 方面 ， 任 意 给 定 一 常数 M, 令 


一 一 Xn <M, 


M, X,>M 
5o =0, 
Si = > X,, 
es 


N(t)=sup{n :n> 0,5, <t}, 
m(t) =E{N(t)}. 


Poisson 过 程 及 其 推广 


(2.10.6a) 


显然 jr = EBX, < pSn < Sn, N(t) > N(t), mi(t) > m(t), Sy)41 < t+ M. 得 ， 


即 


令 M 一 >, 有 


pM(l+m(t)) < t+ M, 





m(t 1 1,M 
a 
t HM +t HM 
mlt 1 
lim sup A <— (YM>) 
too0 + HM 


t 1 
lim sup WL <—. 
t 一 cc t iH 


M Do 
lim jw = lim / (1— F(z))dz = / (1— F(z))dz=k. 
JI 一 co 一 co 0 0 


故 当 M 一 > 时 


(2.10.6b) 


综合 (2.10.6a) 及 (2.10.6b) 知 1 < x 时 (2.10.6) 成 立 . 如 = ,那么 由 yw < x. 对 和 截 








尾 过 程 应 用 上 述 结论 有 
$ ml(t 下 
limsup Cu < limsup 加 2 = 一 >0(YM>0)， 
t 一 2 t 一 co / HM 
令 M 一 ~, 得 


论 


从 而 结 ; 


成 


-ae 
) 


1 
limsup at) < lm — =0. 
Fe 有 Mo84 HM 
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$ 2.11 更 新 方程 与 关键 更 新 定理 


在 定理 2.9.3 中 ， 已 证 明了 更 新 函数 mm(t) 满足 (2.9.5) 更 新 方程 ， 本 节 讨 论 更 为 一 般 
的 更 新 方程 及 其 解 . 
设 已 知 函 数 alt) 及 分 布 函数 F(t), 知 未 知 函 数 4(t) 满足 积分 方程 


40=e0+ / A(t — zr) dF(2). (2.11.1) 
0 


则 称 (2.11.1) 为 更 新 方程 . 

更 新 方程 在 什么 条 件 下 ， 解 存在 且 唯 一 ? 有 何 性 质 ? 

定理 2.11.1 设 alt) 为 一 有 界 函 数 ， FF(t) 为 分 布 函数 ， 则 满足 更 新 方程 (2.11.1 ) 的 
解 存在 且 唯 一 ， 其 解 在 有 限 区 间 上 有 界 ， 且 其 解 4(t) 可 表 为 


t 
4 =a)+ 上 a(t— zr)dm(z). (2:11.23) 
J0 


其 中 避 (t) = DD Bt), P(t) = FO), F(t) = fo Pi(t— x) dF(z). 
证 : 先 证 4(t) 在 任 一 有 限 区 间 上 有 界 . 对 Ys > 0, 由 a(t) 有 界 ， 及 命题 2.10.1 的 推 
论 2 知 m(t) 有 界 . 故 若 4(t) 用 (2.11.2) 表示 ， 则 


sup |4A(t)| < sup la(t)|+ 了 sup lalt)| dm(z) < sup lalt)|(1+m(s)) < x. 
O<t<s O<t<s 0 0<t<s 0<t<s 
其 次 证 明 由 (2.11.2) 表示 的 4(t) 满足 方程 (2.11.1)， 


co 


A(t) =a(t) + m*a(t) 三 adw(t) 十 ( Fa)*a(t) = a(t)+ F*a(t)+ (>， Fi)*alt) 


we 4 





=a(t)+ F * [a(t)+ 5 Fi*a(lt) = a(t)+ F* A(t). 
怠 寺 二 
最 后 证 解 的 唯一 性 ， 即 证 明 任 何 满足 (2.11.1) 式 且 在 有 限 区 间 上 有 界 的 解 4(t) 总 可 
以 用 (2.11.2) 表示 . 注意 到 用 (2.11.1) 式 4(t) 的 表达 式 重 复 代 入 (2.11.1) 式 右边 作为 4(t) 
的 逐步 逼近 ， 即 用 4 = a 十 了 x4 代入 它 的 右边 得 


A=a+Fx(a+F*A)=a+F*xat+F*(F*A) (i 记 F = F*F) 
=a+Fxa+Fo*A=ai+F*xai+Fo*(a+F*4) (i 记 LF3 = Fo*F) 
=a+ Fxai+Fx*aiF*A=..- ( 记 瓦 = Fa_1* F) 

55 
n—1l1 


二 a 十 Dn *a+t P+* 4). 
站 三 
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由 命题 2.10.1 的 推论 2 知 ，Yt > 0,linn 已 (人 =0. 故 


[Fi * A(t)| < supocaect{|A(t — 2)|Fn(t)} =— 0 (4(t) 有 界 ， 对 Yt > 0). 


类 似 地 由 a(t) 有 界 ， mm(t) = ni Fu(t) < ,得 


dim ely RD Fi)*a(t) = ma* al(t), 





于 是 
A(t) = lim [a(t 2 # a(t)+ Fi * A(t)] = a(t) + ma* alt). 
因而 (2.11.1) 的 一 般 解 4(t) 就 是 (2.11.2) 式 ， 唯 一 性 得 证 . 品 


为 叙述 关键 更 新 定理 ， 引 入 阁 干 名 词 概念 ， 非 负 r.v. X 称 为 格 点 的 (Lattice), 若 存 
在 d> 0, 满足 江 % P(X =nd) =1. 既是 格 点 的 ， 意 指 X 只 取 某 个 非 负数 4 的 整数 
倍 . 具有 这 种 性 质 的 最 大 的 d. 称 为 X 的 周期 . 着 F 是 对 的 分 布 函 数 且 XX 是 格 点 的 ， 
则 称 F 是 格 点 的 . 
定理 2.11.2 (Blackwill 定理 ): 设 F(z) 为 非 负 rt.v. 的 分 布 函 数 , 下 , = FR,_1+F, 下 = 
Fm(t) = Dn Fn(t). 
1) 如 下 是 非 格 点 的 ， 则 对 Ya > 0， 


lim [mlt + a) — m(#)] = (2.11.3) 


2) 如 了 是 格 点 ， 周 期 为 4, 则 
im [Im((n 1)d) — m(nd)] = ， (2.11.4) 


证 : ( 略 ; 可 参见 I.W.Feller,” An Introduction to Probability Theory and Its Applica- 
tions”Vol.II Wiley New York 1966 ). 

本 定理 说 明 : 如 了 非 格 点 ， 随 着 时 间 远 离 原点 ， 原 先 的 影响 逐渐 消失 ， 那 么 在 远离 
原点 ， 长 为 a 的 区 间 内 更 新 的 期 望 次 数 趋 于 4. 这 与 直觉 相 吻 合 ， 如 FF 是 周期 为 a 的 格 
点 的 ， 此 时 更 新 只 发 生 在 形 如 nd 的 时 刻 上 ， 因 而 (2.11.4) 成 立 . 

设 h 是 定义 在 [0, x) 上 的 函数 ， 对 任意 6 > 0, 记 m,(6), 元 (6) 分 别 表 h(t) 在 区 间 
(mn 一 1)6 <t<n6 上 的 下 ， 上 确 界 ， 若 它 满足 : 对 Y6 > 0, 7 和 mn (6 ), >_17Ta(6) 有 
限 ， 且 




















lim 6 DD m6) 三 = jm6 mu 


如 安 于 热 二 二 
56 
就 称 h(t) 是 直接 Riemann 可 积 的 . 
易 证 每 一 个 单调 且 绝 对 可 积 函 数 g(t) ( 即 /0 |g(t)| dt < se) 必 是 直接 R- 可 积 芯 
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定理 2.11.3 (关键 更 新 定理 ) 设 是 均值 为 4 的 非 负 随机 变量 的 分 布 函 数 ，F(0) < 1. 
alt) 是 直接 R- 可 积 ， 4(t) 是 更 新 方程 


A(t) = al(t) 十 [ A(t — z)dF(z) 


的 解 . 
(1) 若非 格 点 的 ， 则 
1 pf, 
1 证 A(t) Pe | 天 六 al(t) dt, KH, (2.11.5) 
es 0, KW 60; 


(2) 者 是 周期 为 a 的 格 点 的 ，Yc > 0, 有 


dy ce aufec 0 
lim A(c+nd)= HK anodet+nd), Kk<%, 
0, A= %. 


(2.11.6) 


证 明 从 略 ， 可 参见 I.W.Feller 书 Vol.II. 

关键 更 新 定理 是 一 个 非常 重要 ， 十 分 有 用 的 结果 . 如 在 计算 t 时 刻 的 概率 ， 期 望 的 
极限 性 态 时 ， 常 要 用 到 它 ， 举 例 说 明 如 下 : 

(1) 剩余 寿命 的 极限 分 布 

记 rt 一 Sw(w+1 一 t, 表 t 时刻 的 剩余 寿命 ,对 任意 固定 z > 0, 令 4:( = P(r > 2). 
为 求 lm 4:(t), 先 证 4.;(t) 满足 更 新 方程 


t 
A,(t) = 1— P(t+a+ / As(t— zx)dF(zr). (2.11.7) 
0 
易 知 
1, T>t+z, 
P(re>z|X1=7*)= 4 0, t+z>2>t 
A:(t—7z), t>72>0. 
由 全 概 公式 


| A.(t—z) dF(z)+ [lo F(t+z). 





三 站 4 人 一 2dF(z) 十 人 0. dF(z) 十 人 dF(z) 
| 


因此 (2.11.7) 得 证 . 设 
k= EXi= pr — F(z) dz < cc， 
0 


alt)=1— F(t+2z). 
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六 时 — F(t+z)]dt= fu —F(y)dy<u< x. 
0 这 


且 al(t) = 1 一 了 (t+z) 单调 ， 故 alt) 直接 R- 可 积 ， 应 用 (2.11.5) 式 ， 得 


Lim P(r: > z)= dim A.(t) = el [1 -Fylay (vz > 0). 


这 就 是 71 的 极限 分 布 . 

(2) 交错 更 新 过 程 的 极限 分 布 

考虑 只 有 二 个 状态 的 系统 : 开 (用 “ 1” 表示 ) 或 关 (用 “ 0” 表示), 系统 在 t= 0 时 
是 开 的 且 持 续 开 的 时 间 为 Z1; 接着 关闭 且 持 续 时 间 为 芒 ; 之 后 又 开 着 持续 时 间 为 Z2, 又 
关闭 时 间 为 于 , 如 此 开 并 交替 重复 下 去 . 设 {(2n, 襄 ),n > 1} 为 独立 同 分 布 随机 向 其 序 
列 ( 则 {2Z4,n 之 1} iid, {六 ,nr >> 1} iid, 但 允许 有 与 癌 相依 ). 记 X= 2 十 癌 , So = 
0,55 = D1 Xi,N(t) = sup{n :n>>0,5n < 可 . 则 {N(t),t > 0} 为 更 新 过 程 ， 记 


1, Si <t< Int Znti; 
:| ) nn 二 nn 十 及 十 1， neN. 


0， Sn * Zn+1 < t< Ss 


称 {Ci,t > 0} 为 交错 更 新 过 程 . 

设 H(t) = PZ < 4),G(t) = P(Y, < t),F(t) = P(X, < t), 并 记 P(t) = Pl¢t = 
1), Q(t) = PC = 0), 则 有 : 

定理 2.11.4 若 EBX, < ~, 且 为 非 格 点 的 ， 则 


EZ 
lim P(t) = 一 一 
t 一 Co EZ1 + EY 
EY 
Li t1) 三 一 一 一 一 一 一 ， 
es A 
证 : 注意 
58 


Ce 
{ea = 二 ={Svo<st<Svo+2ZvtD+l = (J {Sn < t < Sn t+ Znti}. 


0 
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由 全 概 公式 
P(t) =P{SN() <t< SN + Zn)+1} = > P(Sn <t < St Znri) 
n=0 
oo t 也 n 
=P(21 >1t)+ > PD Xi <t—2<) XitZnti]dF(z) 
n=1"0 i=2 i=2 


t 
=1- H+ / >》 PIS <t—2<S_1+2Z]dF(r) 
0 n=1 


(其 中 $5 = 0,5%_1 =》 总 (n>2),24 = Zut1) 


i 二 so 


el ao+ {Pe zt)dF(z). 





即 P(t) 满足 更 新 方程 (2.11.1), 此 时 al) = 1 一 五 (1), 由 BX < ,2 > 0.8>0, 故 


B21 一 / (1— H(t) dt < EX1< ~. 
0 


又 1 一 五 (t) 单调 得 1 一 H(t) 直接 R- 可 积 ， 这 样 应 用 定理 2.11.3 得 


1 
EX1 


EZ1 
EZ1+ EY 





{ -a(t= 
0 


dim P(t) = 





类 似 可 证 lim:-,> Q(t) 的 结果 . 

(3) 更 新 报酬 过 程 

有 许多 概率 模型 是 下 列 更 新 报酬 模型 的 特殊 情形 .考虑 更 新 过 程 {N(t),t > 0} 有 着 
时 间 间 隔 X,(n > 1). 其 分 布 为 F, 设 每 当 一 个 更 新 发 生 时 我 们 得 到 一 个 报酬 ， 用 已, 表 
第 n 次 更 新 收 到 的 报酬 . 设 {Rn > 1} iid, R, < 0, as., 并 设 随机 向 量 {(X, Ra)n > 1} 
iid, 然而 允许 R， 依 赖 于 X。， 令 Rb = 二 全 BR,, R(t) 表 到 t 时 为 止 的 总 报酬 ， 令 
ER, = ER, EX = EBX, = 1. 则 有 : 

定理 2.11.5 若 BR < ,BX=h< x, 那么 




















(1) 
R(t) ER 
或 记 | 
lim 2 = (a.s.). 
t 一 cc 1 EX 
(2) 
lim 区 二 2 
一 cc t ~ EX 
证 : 由 于 59 


REO) _ DR _ Do Ro NO) 


t t N(t) pe 
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N(t) 
加 
及 
ee 
to + EX 
知 (1) 成 立 . 


为 证 (2), 首先 注意 (N(t) 十 1) 关于 {Xn,n > 1} 是 停 时 ， 因 而 也 是 {R nm > 1} 的 停 
时 ， 由 Wald 等 式 


NI(t) N(t)+1 
EI》 Ra]= Bl》 Ra]- ERN041]= [nm(t) + 1]ER- ElRv(41l]. 
性 宇 在 入 守业 


故 
ER(t) m(t)++ lop 由 ElRN(t)+1l 
t t t 
如 果 我 们 能 证 明 : 当 t 一 x 时 2 一 0. 那么， 由 基本 更 新 定理 即 可 证 (2) 成 立 . 


为 此 ， 令 g(t) = B[Rv(w+1], 用 ”更 新 技巧 











E(Ri|X1 = 72), 信安 
g(t — 2), 信和 法 


BE(RN(+i|X1 = 2) = | 
因为 Xi = 2 >t 时 ，N(t) =0:; 而 x<t 时 ， 将 时 间 原 点 移 至 x, 过程 从 新 开始 所 以 
0 t 
o) = BRvotal = 0)dp(e) = ht)+ oa 
0 0 
其 中 以 ) = /YB(Ri|Xi = z)4F(z). 事实 上 ， 对 一 切 4， 
Ia(#)| < 人 IE(Ri|X1 = £2)dF (x) < / E(|Ri||X1 = z)aF (7) 
t t 


< 人 BE(Ri|X1 = zjdF(z) = BIRi| < ~. 
0 


得 t 一 oc,h(t) 一 0. 且 对 所 有 + > 0.h(t) < El|Ril|. 因此 ，ve > 0 存在 T, 当 +> 了 T 时 
Ih(#)| < e. 由 定理 (2.11.1) 有 


利用 基本 更 新 定理 . 
g(t) a(t)| tT h(t x)| dm(z) | t h(t z)|dm(z) 
2 :| t 本 大 





(t) — m(t—T) 


t 一下 
二 60， (t>T) 


t 





| 
1 
你 


EX 


一 





(t — 00). 
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由 的 任意 性 ， 得 im、 2 = 0. 于 是 ( 2) 成 立 . 

注 : 定理 说 明 ， 对 于 长 时 间 和 运行 后 求 得 的 期 望 平 均 报酬 就 等 于 一 个 周期 内 得 到 的 期 
望 报酬 除 以 一 个 周期 的 期 望 时 间 . 

4) 计数 模型 

这 里 指 的 计数 器 是 一 种 用 于 检测 与 记录 瞬时 脉冲 信号 的 装置 . 例如 ， 常 见 的 Geiger- 
Muller 计数 器 及 电子 放大 器 等 ， 所 有 具体 的 物理 计数 器 都 有 人 缺点: 它 不 能 检测 到 所 有 进 
入 检测 区 域 的 信号 .在 记录 一 个 粒子 或 一 个 信号 后 ， 计 数 器 必须 恢复 或 更 新 自己 后 才能 
接收 下 一 个 信号 ， 在 调整 期 (或 称 为 锁 住 期 ， 不 接收 期 ) 内 到 达 信 号 会 丢失 ， 我 们 必须 
区 分 到 达 粒 子 (信号 ) 和 记录 粒子 ( 信号 ). 实验 者 通过 该 计数 器 只 能 观察 到 记录 粒子 信 
号 , 希望 由 此 发 现 到 达 过 程 的 性 质 , 假定 信号 按时 间 间 隔 {Xa,n > 1} 的 更 新 过 程 到 达 ， 
F(Z) = P(X < z). 计数 模型 按 其 锁 住 期 加 以 区 分 ， 这 里 只 讨论 一 类 常见 的 I 型 计数 
器 ， 设 += 0 时 一 个 信和 号 到 达 计 数 器 ， 在 六 锁 住 期 内 不 接收 到 达 的 信号 ， 记 录 的 第 一 个 
信号 是 矶 后 到 达 的 信号 ， 由 于 这 个 信号 的 记录 ， 计 数 器 又 有 一 个 锁 住 期 ,下 一 个 记 
录 的 信号 是 计数 器 恢复 工作 后 0 如 此 重复 进行 ， 其 中 锁 住 期 依次 记 为 
五 , 克 ，… 设 其 独立 同 分 布 G(y) = P(Y < 让 且 {n>1}) 与 {Xn,n>1) 独立 . 设 2 
es (不 包括 原点 ), 因为 这 过 程 在 每 次 记录 之 后 开始 恢复 ， 
双人 =23…) 为 人-1) 次 和 郊 次 记录 的 时 间 间 隔 , 因为 这 过 程 在 每 次 记录 之 后 开始 恢 
复 ， 知 {2,,n > 1} 构成 一 更 新 过 程 ， 如 图 2.11.9 所 示 . 设 So = 0,9。 = 1 Xi,N(t) = 
sup{n :n> 0 ty = Sywri mt A(t)= Py >7). 由 {Xn>1} 与 {Yn>1} 
独立 及 注意 到 21 = 页 +?7 = SNtywj+t1, 故 和 7 的 分 布 为 

















Me Ply+Yy < z|Y1 = 9) dGl(y =/ -4 sy(V}dG(y 
0 


4:(t) 由 (2.11.7) 求 得 ， 这 样 I 型 计数 器 计数 信和 号 间 的 时 间 间 隔 分 布 就 完全 确定 了 . 进 一 
步 应 用 更 新 定理 ， 不 难 求 得 长 期 检测 时 ， 每 单位 时 间 平 均 记录 信号 数 是 1/B21. 以 及 应 
用 关键 更 新 定理 证 明 ， 当 t 一 x 时 ， 记 录 的 信号 与 到 达 信号 数 的 比例 是 EX1/ E21. 

当 到 达 信 号 是 参数 为 和 的 Poisson 流 时 ， 即 F(z) = 1 一 er ,2 > 0. 此 时 服从 参 
数 为 和 的 指数 分 布 ， 21 的 分 布 变 为 











P(Z1 <z)= G(z — y)Me- YY dy. 
0 
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2.1 下 列 事 件 有 什么 关系 ? 试 指出 并 说 明理 由 : 
1. (N(t) <n) 与 (56, >); 
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. (W(t) > xz) 与 (N(t+ 2)— N(t) = 0). 
2.2 {NN(t),t > 0} 为 Poisson 过 程 ， 任 给 0 < s<t, 证 : 


P(N(s) = kN(t) = 7) = 人 一 2 (0<k<n). 


2.3 设 {N(t),t > 0} 为 Poisson 过 程 ， 参数 为 人 , 求 或 证 明 : 
1. E{N(t)N(s+t)}: 
2. B(N(s 十 t)|N(s)) 的 分 布 律 ; 
3. 任 给 0<s<t 有 P{N(s) < N(t)}=1; 
4. 任 给 0<s<te>0, 有 lim:,s P{N(t)— N(s) > ce}=0. 
2.4 设 i 是 独立 同 (0,1) 上 均匀 分 布 ， Xi = 一 和 -1In TD (和 > 0, 常数 ), 求 : 
. X; 的 分 布 ; 
.Sn = XI 十 2 十 … 十 Xn 的 分 布 ; 
. 2 = 2 和 5 的 概率 密度 函数 ， 并 与 x?*(2n) 的 密度 函数 比较 . 
2.5 求 : E(Si|N(t) =n) (k <n). 
2.6 求 W(t) 与 V(t) 的 分 布 及 它们 的 联合 分 布 . 
2.7 证 明定 理 2.6.2. 
2.8 证 明定 理 2.6.1. 
2.9 求 在 N(t) = 的 条 件 下 ， Si (k <n) 的 条 件 概率 密度 . 
2.10 设 在 某 公 路 上 ， 汽 车 运输 流动 构成 一 Poisjop 流 ， 其 强度 等 于 每 分 钟 30 辆 (强度 
即 参 数 和 ), 试 求 n 辆 汽车 通过 观察 站 的 时 间 需 要 多 于 > 秒 的 概率 ( 答案 为 : 


1 Xn 一 1 一 备 
yams ie du) 


ce 一 
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2.11 设 复合 Poisson 过 程 {X(t),t> 0}, 求 BX(t) 及 D(X(t)). 
2.12 设 {N(t),t > 0} 为 条 件 Poisson 过 程 
1. N(t) = 给 定 条 件 下 ， 求 1 时刻 后 首次 事件 发 生 的 时 间 的 条 件 分 布 ; 
2. 计算 : lims_,o 了; 
i P{NGTA)- N=1|N(D)=n} 
. ， 1IIR 0 瑟 。 

2.13 考虑 一 个 单 服务 员 银行 ， 顾 客 到 达 按 照 速率 为 和 的 Poisson 过 程 ， 服 务 员 为 每 一 位 
顾客 的 服务 时 间 是 r.v. 分 布 函数 为 G, 来 客 到 达 门 口上 只 是 在 当时 服务 员 空 闲 时 才 准 
进来 . 求 : 

1. 顾客 进 银行 的 速率 是 多 少 ? 

2. 顾客 进 银行 占 多 大 比例 ? 

3. 服务 员工 作 的 时 间 占 多 大 比例 ? 
k), P(N(3) = k). 

2.15 汽车 到 达 大 门 ， 每 辆 汽车 随机 长 度 XX, 其 分 布 为 f, 第 一 辆 汽车 到 达 ， 靠 着 大 门 停 
放 . 每 一 辆 后 来 的 汽车 停 在 前 一 辆 车 后 面 ， 其 间距 离 Y 是 一 个 [0.1 上 均匀 分 布 
的 r.v.，N。 表示 在 离 大 门 距离 > 内 停 在 一 条 线 的 车 数 ， 求 : ”lim,_,~ 2 (其 中 
Fl(y)=1-e yy>0). 


2.16 设 { nm > 1} iid, 和 的 概率 密度 函数 为 


一 pz 一 6) » > 0， 
-| 寅 es 








0, v6é. 


其 中 6 > 0 给 定 . 求 更 新 过 程 中 的 概率 P(N(t) > 人 ). 

2.17 设 已 的 概率 密度 f(z2) = 和 ze-Y,x > 0, 求 相 应 的 更 新 函数 mm(t). 

2.18 求 Poisson 过 程 中 ， 全 寿命 9 = Sw(twy+1 一 SN(t) 的 分 布 . 

2.19 设 % = + - Swin) 为 更 新 过 程 的 年 令 ， 证 {5.,t > 0] 是 一 个 Markov 过 程 ， 并 求 其 转 
移 分 布 函数 F(y:t,2) = P(6s4t 和 = z), 求 limt ww P(6t > 2). 

2.20 设 4(t) 是 更 新 方程 4(t) = alt) + 4(t 一 z)dF(z) 的 解 ， 其 中 alt) 是 一 个 有 界 非 减 
函数 ， a(0) = 0, 求证 lim:_,~x 2 = 全， 其 中 必 = lint > at,A< x 是 相应 于 下 
的 均值 . 

2.21 考虑 一 个 分 布 函数 为 了 的 更 新 过 程 ， 假 设 每 一 事件 以 概率 1 - 4 被 抹 掉 ， 以 比例 因 
子 :扩大 时 间 尺 度 ， 证 明 事 件 流 构成 一 更 新 过 程 ， 其 中 事件 之 问 的 时 间 间 隔 分 布 函 
数 是 63 


Co 


F(z;g) = (1—g)" tab,(z/q), 


六 党 二 
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其 中 ,为 了 的 nn 重 卷 积 . 


2.22 ( 续 问题 2.21) 设 $(s) 为 (2) 的 Laplace 变换 , 求 FUz;d) 的 Laplace 变换 (9(s,4) = 


go(sg) ) 
1 一 (1 一 02240459 全 


2.23 设 ”个 零件 的 寿命 X1, >,… ,XX 是 独立 同 指数 分 布 ， 参 数 为 ,该 n 个 零件 从 
t 二 0 开始 工作 ， 记 X(1) < Xz) <… < X(,) <.… < X(%) 为 相继 失效 的 时 刻 ， 试 求 
XXX 的 联合 概率 密度 函数 (1 <7 < n). 

2.24 同上 , 令 半 = (=) 一 XG-D,2<i<n. 试问 六 ,了 ,… ,六 是 否 独 立 ? 同 
分 布 ? 并 证 明 你 的 猜想 ? 

2.25 设 {N(,t> 0] 为 时 齐 Poisson 过 程 ， 51, 52,… ,Su … 为 事件 相继 发 生 的 时 刻 . 

. 给 定 WU = n, 试问 51, 52 一 51,… ,Sn 一 51 是 否 条 件 独 立 ? 是 否 同 分 布 ? 

试 证 明 你 的 猜想 ? 








je 


2. 求 B[S1|N(t)] 的 分 布 律 ; 
3. 利用 1, 及 2, 求 B[Si |N(t)] 的 分 布 律 ; 
4. 求 在 Nb =n 下 5; 与 51(1<i<k<n) 的 条 件 联 合 概 率 和 密度 . 


2.26 设 {N(t),t > 0} 是 参数 为 》 的 时 齐 Poisson 过 程 ， So = 0，5, 为 第 n 个 事件 发 生 
的 时 刻 . 求 : 
1. (S52, S95) 的 联合 bp.d.f.: 
2. E(S1|N(t) > 1): 
3. (5S1,52) 在 N(t) = 1 下 的 条 件 p.dt.. 
2.27 设 {Ni(t),t > 0} 是 参数 分 别 为 A; 的 时 齐 Poisson 过 程 ， 且 相互 独立 (i = 1,2). 
S41 = 0,， 5S 四 为 第 i 个 过 程 第 个 事件 发 生 的 时 刻 . 
1. 令 N(t) = Wi(t) 十 Nz(t), 证 明 {N(t),t > 0} 是 参数 为 Xi + 》Xa 的 时 齐 Poisson 
过 程 ; 
2. 求 Wi(0S2)) 及 Ni(S2)) 的 分 布 律 ; 
站 
2.28 ( 见 $ 2.7) 若 ps ~ G(p), 即 Plps = = (1 一 p)*-1p,k ET 求 平稳 无 后 效 流 X(t) 
的 母 函 数 与 EX(t). 
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$ 3.1 定义 与 例子 


本 章 讨论 离散 参数 T = {0,1,2,…} = No, 状态 空间 5 = {1,2,… ,} 可 列 的 马尔 可 
夫 过 程 ， 通 常 称 为 马尔 可 夫 链 ( Markov Chains), 简称 马 氏 链 (M.C.). 

马 氏 链 最 初 由 Markov 于 1906 年 研究 而 得 名 .至今 它 的 理论 已 发 展 得 较为 系统 和 深 
入 . 它 在 自然 科学 ， 工 程 技 术 及 经 济 管理 各 领域 中 都 有 广泛 的 应 用 . 

定义 随机 序列 {X,,n > 0} 称 为 马尔 可 夫 链 . 如 果 对 任意 io0.ii,… ,加 ,ESmE 
No 及 P{Xo = io, Xi = 三 ,二 各 >0 有: 


P{Xnti = intilXo=io, Xi1=il, ,Kn=in}= P{Xati=inti|Xn =in}. OO 
(3.1.1) 
(3.1.1) 式 刻画 了 马 氏 链 的 特性 ， 称 为 马尔 可 夫 性 ( 或 无 后 效 性 ), 简称 马 氏 性 . 
定义 Vi,j € 5, 称 P{Xnti = j|X, = 引 全 or(n) 为 六 时 刻 的 一 步 转移 概率 . 若 对 
Vi,j € 5,pij(n) 三 pij, 号 nn 无 关 ， 则 称 {Xi,n > 0} 为 齐 次 马 氏 链 . 记 P = (pij), 称 P 为 
{Xn,n > 0} 的 一 步 转 移 概 率 和 矩阵 ， 简 称 为 转移 矩阵 ( Transition matrix). 
本 章 仅 限于 讨论 齐 次 马 氏 链 . 
为 直观 理解 马 氏 性 的 意义 , 设想 一 质点 在 一 直线 上 的 整数 点 上 作 随 机 运动 . 以 X, 表 
示 该 质点 在 时 刻 ”的 位 置 . (X = i) 表示 质点 在 时 刻 ”处 在 i 状态 (位 置 ) 这 一 随机 事 
件 ， 如 果 把 时 刻 n 看 作 “ 现 在 ”， 时 刻 0,1,… ,n 一 1 表示 “过 去 ”， 时 刻 n+1 表示 “将 
来 ”， 那么 (3.1.1) 式 表明 在 已 知 过 去 Xo = 2 … 站 -1 二 计 -1 及 现在 XX, = i 的 条 件 下 ， 
质点 在 将 来 时 刻 n 十 1 处 于 状态 如 +1 (移动 到 加 +1 位 置 ) 的 条 件 概率 ， 只 依 闲 于 现在 发 生 
的 事件 (X, = 记 ), 而 与 过 去 历史 曾 发 生 过 什么 事件 无 关 . 简 言 之 , 在 已 知 “ 现 在 ”的 条 件 
下 , “将 来 ”与 “过 去 ”是 独立 的 .pij(n) 表示 质点 在 时 刻 n 由 状态 ; 出 发 ,于 时 刻 n 填 1 
转移 到 状态 7 的 条 件 概率 ， 而 齐 次 性 : pij(n) = pij 表示 此 转移 概率 与 时 刻 n 无 关 . 
下 面 介绍 若干 例子 . 














(). 独立 随机 变量 和 的 序列 


设 {pai 六 > 0} 为 独立 同 分 布 随 机 变量 序列 . 且 pn 取 值 为 非 负 整数 ， Pf{pn 2} 一 
oili2>0 且 >oou=1. 令 X=0Z=>i-ip 则 易 证 {Xnm >0] 是 一 马 氏 链 , 且 


05 ee 
aj-i, 7 之 2， 
Pij; 三 


0， 7 << 7. 


第 三 章 ”马尔 可 夫 链 


显然 {pn,n > 0} 本身 也 是 一 马 氏 链 . 


(2). 直线 上 的 随机 游 动 


a) 无 限制 的 随机 游 动 

-i 质点 在 数 轴 上 随机 游 动 ， 每 隔 一 单位 时 间 At ( 设 At = 1) 移动 一 次 ， 每 次 只 
能 向 左 或 向 右 移 动 Az 单位 ( 设 Az = 1), 或 原 地 不 动 . 设 质点 在 0 时 刻 的 位 置 为 a, 它 向 
布 移动 的 概率 为 p > 0, 向 左 移动 的 概率 为 a > 0, 原 地 不 动 的 概率 为 7 > 0, (p+g+7= 1)， 
且 各 次 移动 相互 独立 ， 以 表示 质点 经 风 次 移动 后 所 处 的 位 置 . 则 {X,n > 0} 是 一 马 
氏 链 ， 且 pii41 = 2,pii-1 二 4,pii 三 7 其 余 pi; = 0. 

(b) 带 吸 收 壁 的 随机 游 动 

设 (a) 中 的 随机 浒 动 限制 在 5$ = {0,1,2,… :分 内 ， os 0 或 5 后 就 
永远 停留 在 该 位 置 ， 即 poo = 1,pss = 1, 其余 pr<27< -1) 同 (a)， 这 时 序列 
{Xn,n > 0} 称 为 带 两 个 吸收 壁 0 和 5 的 随机 游 动 ， ee 

(c) 带 反 射 壁 的 随机 游 动 

如 (b) 中 的 质点 到 达 0 或 5 后， 下 一 次 移动 必 返 回 到 1 或 2- 1 即 po = 1,pos-1 = 
1,poj 二 0(7 冯 1),poj = 0 (7 冯 5 一 1), 其 余 同 (a). 称 此 {X,n > 0} 为 带 反 射 壁 0 和 5 的 
随机 游 动 . 则 {X,n > 0} 是 一 马 氏 链 . 

d) 艾 伦 费 斯 特 (Ehrenfest) 模型 

这 是 一 个 著名 的 粒子 通过 薄膜 进行 扩散 过 程 的 数学 模型 ， 即 一 质点 在 状态 空间 5 = 
{一 a, 一 4 十 1,… ,一 1,0,1,2,… ,a} 中 作 随 机 游 动 ， 且 带 有 两 个 反射 壁 a 和 -ww, 其 一 步 转 
移 概率 是 : 





Dii-1 二 于 (1 二 2) ，DiiH1 二 去 人 一人， 一 aa+1<i<w 一 1 

Pa,a-1 二 也 2D-a,-a+l 二 此 

pij = 0， 其 它 . 
由 上 可 看 出 ， 当 质点 位 置 ; < 0, 即 在 原点 左边 时 ，pii;_1 <$,piiti > $, 此 时 质点 下 
一 步 向 右 移 动 比 向 左 移动 的 概率 大 ， 旦 与 离 原点 的 距离 成 正比 .反之 亦 然 . 当 质 点 在 原 
点 时 ， 向 左 向 右 的 概率 相等 这样 的 随机 游 动 可 作 如 下 两 种 物理 解释 . 

1 ”考虑 一 容器 内 有 24 个 粒子 作 随机 游 动 ， 设想 一 个 薄膜 (界面 ) 将 容器 分 为 相等 
的 左 ， 右 两 部 分 A 和 B. 如 用 X, 表示 n 时 刻 B 内 的 粒子 数 与 A 内 粒子 数 之 差 ， 并 假定 
每 次 移动 只 有 两 种 可 能 ， 一 粒子 从 左 到 右 或 一 粒子 从 右 到 左 ， ( 即 同一 时 刻 有 两 个 或 两 
个 以 上 粒子 移动 的 概率 为 0, 当 At 一 0 时 作 这 种 假设 是 合理 的 ). 则 {X,n > 0} 可 用 上 
述 模 型 来 描述 . 

2” 设 一 粒子 受 一 “ 弹 得 力 ” 作 用 ， 在 直线 上 作 随 机 游 动 ， 当 粒 子 偏离 原点 时 ， 受 到 
一 附加 的 与 偏离 距离 成 正比 且 指 向 原点 的 力 的 作用 ， 从 而 使 向 原点 移动 的 概率 增 大 . 用 
Xn 表示 粒子 在 时 刻 ”的 位 置 ， 则 同样 可 用 上 述 模型 来 描述 . 











3.1 ”定义 与 例子 


(3). 排队 模型 


(a) 离散 排队 系统 

考虑 顾客 到 达 一 服务 台 排队 等 待 服务 的 情况 . 阁 服 务 台 前 至 少 有 一 顾客 等 待 ， 则 在 
一 单位 时 间 周 期 内 ,服务员 完 成 一 个 顾客 的 服务 后 , 该 顾客 立即 离 去 ; 着 服务 台 前 没有 顾 
客 ， 则 服务 员 空 闲 . 在 一 个 服务 周期 内 ， 顾 客 可 以 到 达 ， 设 第 ”个 周期 到 达 的 顾客 数 和 
是 一 个 取 值 为 非 负 整数 的 随机 变量 ， 且 {&,,m > 1} 相互 独立 同 分 布 ， 在 每 个 周期 开始 时 
系统 的 状态 定义 为 服务 台 前 等 待 服务 的 顾客 数 , 若 现在 状态 为 i, 则 下 周期 的 状态 7 应 为 


ji-D+é, i2l, 
cies i=0. 


其 中 & 为 该 周期 内 到 达 的 顾客 数 . 记 第 n 周期 开始 的 顾客 数 为 X,, 则 和 + = (Zn 一 
1)+ 二 6, 这 里 of = maz(a,0). 根据 马 氏 链 的 定义 ， 容 易 证 明 {X,n > 0} 是 一 个 马 氏 
链 . 和 若 设 人 全 一 一 k} = = dg, dr 之 0, D226 Uk 一 1; 则 {Xn > 0} 的 转移 概率 为 


Poj 三 0 7 > 0， 
D1 = Qj 了 过 0， 
Di1 = 0aj+1-i 1>1,7>1i—1, 
Dij = 0, 1 


直观 上 显而易见 : 知 Be, = DR_okax > 1, 则 当 充分 大 后 ， 等 待 顾客 的 队长 将 无 
限 增 大 ; 着 BE。 < 1, 则 等 待 服务 的 顾客 队长 趋 近 某 种 平衡 - 

(b) G/M/1 排队 系统 

G 一 表示 顾客 到 达 服 务 台 的 时 间 间 隔 ， 假 设 为 独立 同 分 布 ， 分 布 函 数 为 G(z); 

M 一 表示 服务 时 间 , ， 假 设 为 独立 同 指数 分 布 ( 设 参数 为 由 , 且 与 顾客 到 达 过 程 相 互 
独立 ， 

一 表示 单个 服务 员 . 

记 X 表示 第 ”个 顾客 到 达 服 务 台 时 系统 内 的 顾客 数 (包括 该 顾客 ), T, 表示 第 ”个 
顾客 到 达 时 刻 ， 易 证 {X,.n > 1} 为 一 马 氏 链 . 下 面 计 算 它 的 转移 概率 . 令 


AE{X, =i Xpi =i+1- 放 (20,0<7<2 
由 于 各 顾客 的 服务 时 间 相 互 独立 ， 且 服从 参数 为 / 的 指数 分 布 ， 所 以 (0, 时 间 内 服务 完 
的 顾客 数 服从 参数 为 / 的 Poisson 分 布 . 即 


e 一 


P{ 在 (0, 相 内 服务 完 ; 个 顾客 } = 
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由 此 可 得 
十 co 十 cc i (ut) 
P{A|Xn sy P{A|Xn = i Tri TT =9daco= 人 e-/ re 


即 
十 oo 
ee -0 dG(t), 1<j<ii>0. 


Pio 是 服务 台 由 有 i 个 顾客 转 为 空闲 的 概率 ， 显 然 


CE - 下 二 和 oe 
pio = > 人 Gi -dG(t j= [ > cdG() i>0. 
~ 


=i 二 1 :二 i 二 1 


(4). 离散 分 支 过 程 


考虑 某 一 群体 ， 假 定 某 一 代 的 每 一 个 个 体 可 以 产生 个 下 一 代 个 体 ， 其 中 是 取 值 
为 非 负 整 数 的 离散 随机 变量 ， P{ = 人 = > 0,k > 0, Roax = 1. 设 某 一 代 各 个 体 
产生 下 一 代 的 个 数 相 互 独立 同 分 布 且 与 上 代 相 互 独立 ， 记 X, 表示 第 n 代 个 体 的 数目 ， 
则 当 X,, =0 时 ， 有 Xi=0 当 和 >0 时 有 


Xntl 三 1 二 +é2 四 .十 《区 . 
其 中 & 是 第 nn 代 中 第 i 个 个 体 产 生 的 下 一 代 的 个 数 . 由 此 可 知 ， 只 要 给 定 X,,, 那么 忒 ,+1 
的 分 布 就 完全 决定 了 ， 且 与 以 前 的 如 1, 让 -2， Cp 无 关 ， 故 {Xn,n > 1} 是 契 一 马 氏 链 . 
易 知 
Pij =P{Xnt1 NX 二 计 = P{ 红 十 2 十 … 十 x， = j|X, 二 


=P{&1 十 2 十 … 十 在 二 让 
_ WR) 


Ozi [sa6 





最 后 一 个 等 号 的 证 明 留 给 读者 。 (提示 : 用 和 母 函 数 ) 

下 面 的 定理 提供 了 一 个 非常 有 用 的 获得 马尔 可 夫 链 的 方法 ， 并 可 用 于 检验 一 随机 过 
程 是 否 为 马尔 可 夫 链 ， 读 者 可 以 用 前 面 的 有 关 例子 验证 . 

定理 3.1.1 设 随 机 过 程 {Xm > 0] 满足 : 

1° Xn = 了 (Xn_1,tn) (n>0), 其 中 f:5x5 一 S$S, 且 & 取 值 在 $ 上 ; 

2” {5&4.n > 1} 为 独立 同 分 布 随机 变量 ， 且 Xo 与 {6&%,n > 1} 也 相互 独立 ; 
则 {X。,n > 0} 是 马尔 可 天 链 ， 而 且 其 一 步 转移 椰 罕 为 








pij = 了 PE = 让， (3.1.2) 


3.2 ”转移 概率 矩阵 


证 : 设 n>1, 注意 到 &41 与 Xo0,X1,… ,Xn 相互 独立 ， 我 们 有 
P(Xn41 = inti|Xo =20 ,Xn = i,) 
=P(f(Xn ént1) = int1|Xo = io,*** ,Xn = in) 
=P(f(in, Ent41) = 加 Ho =i0 ,Kn = in) 
=P(f(in, ént1) = int1), 
同样 地 
P(Xnt1 = inti| Xn =in) = P(f(in, tnt1) = bnt1). (3.1.3) 
因此 
P(Xnt1 = inti|Xo = io ,Xn =in) = PE = inti| Xn = in), 
即 {X,n > 0} 是 马尔 可 夫 链 .由 (3.1.3) 式 知 ， 一 步 转移 概率 为 (3.1.2) 式 . 














$ 3. 2 转移 概率 矩阵 





设 {Xn:.n > 0} 为 马 氏 链 ， Ps Tn) 其 中 Dij = P{Xn41 = j|Xn 二 让 是 步 转 移 
概率 . 显然 
piy>0,iies; pj=1,ies. 


jES 
定义 称 矩 阵 A = (aij)sxs 为 随机 矩阵 , 着 wj > 0,i,7; < 3, 上 且 对 Yi E 5. 有 
Djes ai =1. 口 
显然 ，P = (pi)) 是 一 随机 和 矩阵. 
记 


Ti(n) = P(X = 0), (Rn) = (nn), Tn), TO 


7(n) 表示 n 时刻 X, 的 概率 分 布 向 量 . 称 {wi;(0),iE 5} 为 马 氏 链 的 初始 分 布 . 下面， 我 
们 将 看 到 ， 一 个 马 氏 链 的 特性 完全 由 它 的 一 步 转移 概率 矩阵 P 及 初始 分 布 向 量 r(0) 决 
定 . 

首先 ， 对 任意 io, 谎 ,… ,i € 5, 我 们 计算 有 限 维 联合 分 布 P(Xo = io, XX1 = 计 ,….， 


P(Xo > i0,X1 ee 21， 本 人 se 2) 
=P(Xo = io)P(X1 = ii|Xo = io)P(X; = iz|Xo 107 4) 





Ans in|Xo = oy" ,Kn-1 = in-1) 
要 . .6069 ， 3 
=P(Xo=io)P(X1 =i|Xo= io) P(X = i [Xi =i): P(X = i | Xn = bl) 


= (0 pon Db Di 
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故 


P(Xo = io, X1 二 21 二 各) 二 To(0)PioiDii "Pin iin (3.2.1) 


即 P(Xo = io, Xi =2 ,Xn 二 i) 完全 由 7(0) 及 了 决定 . 
类 似 可 以 证 明 任 意 n 个 时 刻 的 联合 分 布 也 完全 由 r(0) 及 P 决定 . 
其 次 ， 有 以 下 定理 : 
定理 3.2.1 





(n+1)= 7n)P. (3.2.2) 
n(n)= 7(0).P". (3.2.3) 


其 中 P" 是 P 的 次 寡 . 
证 : 先 对 事件 进行 分 解 


(Xnt1 =7) = (J(X =i, Xa = 
i€S5 


因为 当 1 天 k 时 ， (X,, 一 门 (2 = k) = 1. 故 


P(Xnt1=j)= P(X, = i Xnt = 


i€ES 
= P(X =iP(Xat1 = jn =7) = >》 mi(n) pi 
i€ES i€ES 


写成 向 量 形式 即 得 
X(N 1)= 7n)P. 


重复 利用 (3.2.2) 式 即 得 (3.2.3) 式 ， 
(3.2.3) 式 表明 任 一 时 刻 分 布 由 r(0) 及 P 完全 决定 . 
这 些 事 实 表明 ， 马 氏 链 {X,m > 0} 的 概率 性 质 完全 由 x(0) 与 P 的 代数 性 质 决定 . 
为 了 下 述 定理 的 书写 方便 ， 记 中” = P(Xntm = j|X = 由 为 m 步 转移 概率 
PC = (pl 1) 为 m 步 转 移 概 率 矩 阵 . 
定理 3.2.2 ( Chapman-Kolmogorov 方程 ) 














RES 
或 
Pm+n) PpP™+? 二 p™ 。 Pp” 二 P(m) PY) (3.2.5) 
证 : 因 更 


(Xo = 2 min = 了) = U (Xo = .0 = kk, Kntm 入 
KES 


3.3 ”状态 的 分 类 








故 
P(Xm+n A j|Xo ~ 2) 三 入， P(Xo ee 1, Xm i k, Xmin et 7)/ P(Xo < 2) 
KES 
et 》， P(X + k|Xo 2) $ P(Xmtrn j|Xo i, Xn k) 
KES 
三 = pi P(X m+n 一 j|Xm 至 k) (由 马 氏 性 ) 
KES 
人 ) (nn) 
= 
KES 
即 
思 = > pl (mm) 2 
KES 
写成 向 量 形式 即 


Pm+n) 二 PC) : Pt. 


再 注意 到 Pt = P, 将 m=n=1 代 入 上 式 得 Pl?=P.P=P?. 从 而 得 到 (3.2.4) 式 及 
(3.2.5) 式 . 

由 上 可 知 ， 一 个 马 氏 链 运 动 规律 的 概率 特性 取决 于 它 的 转移 概率 矩阵 特性 .这样 ， 
研究 前 者 就 可 以 转化 为 研究 后 者 . 

(3.2.4) 式 简称 C-K 方程 显然 PV" = (pi ) 是 一 随机 矩阵. 














$ 3.3 状态 的 分 类 


这 一 节 我 们 将 对 马 氏 链 的 状态 按 其 概率 特性 进行 分 类 , 并 讨论 这 些 分 类 的 判断 准则 . 

先 举例 说 明 . 

例 1 设 系统 有 三 种 可 能 状态 5 = {1,2,3}. “1” 表示 系统 运行 良好 ，“ 2 ”表示 
运行 正常 ，“ 3 ”表示 系统 失效 .以 已 表示 系统 在 时 刻 n 的 状态 ， 并 设 {X,.n > 0} 是 
一 马 氏 链 . 在 没有 维修 及 更 换 条 件 下 ， 其 自然 转移 概率 矩阵 为 


i 江 

20 20 20 

9 主 

下 二 | 0 0 
0 0 1 





由 了 可 以 看 出 ， 从 “1 或 “2 ”状态 出 发 经 有 限 次 转移 后 总 要 到 达 “3 ”状态 ， 
而 一 旦 到 达 “ 3 ” 则 永远 停 在 “ 3 ”， 显然 状态 “ 1 ”>，“ 2 ”与 状态 “ 3 ”概率 性 质 不 
同 . 由 此 我 们 引入 如 下 定义 : 

定义 称 状态 iE 5 为 吸收 态 , 若 pr = 1. a 
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定义 对 i,j € 5, 车 存在 ne ,使 pi?? > 0, 则 称 自 状态 i 出 发 可 达 状 态 j, 记 为 
i 一 了 如 果 ii 一 7 且 ;一 i 则 称 i,j 相通 , 记 为 i j. 着 一 马 氏 链 的 任意 两 个 状态 部 相 
通 ， 则 称 为 不 可 约 链 . 

定义 首 达 时 间 为 














T;; = min{n :n> 1,X, = 7,Xo= i. 
车 右边 为 空 集 ， 则 令 T) = x a 


Tj 表示 从 i 出 发 首次 到 达 ; 的 时 间 ; Ti; 表示 从 i 出 发 首次 回 到 i 的 时 间 . 
定义 首 达 概率 为 





fi = P{Ts; =%|Xo= 订 = P{X, = JR zj1<k<n—1|xXo=. 口 


/49 表示 从 i 出 发 经 4 步 首次 到 达 j 的 概率 而 ;= 并 (表示 由 i 出发, 经 
有 限 步 终于 到 达 ; 的 概率 . 
定义 若 方 = 1 称 ; 为 常 返 状态 : 若 f; < 1 称 ; 为 非常 返 状态 ( 或 称 为 瞬时 状态 ) 








口 
本 节 例 1 中 ， Tis 表示 系统 的 工作 寿命 ， 因 此 
3 P{T1s 1|Xo 1} P13 和 
因 


[二 
这 里 (1 包 1 乌 3) 表示 从 “1” 出 发 经 1 步 到 “ 1”， 再 经 1 步 到 “3 ”>， 故 


21 
200 “等 罕 


P(Ti3 > mn) 表示 系统 在 [0,n] 内 运行 的 可 靠 性 . 故 研究 万 ”及 7 的 特性 是 颇 有 意 
显然 ， 该 系统 至 多 经 有 限 步 总 会 被 吸收 态 吸 收 ， 因 此 由 概率 背景 可 直观 地 得 到 


六 
89 = P11 ' P13 + P12 * P23 = 


lim PY = 
姥 一 0 





0 0 
0 0 
0 0 


Fa 





由 此 人 们 想到 了 利用 概率 背景 来 解决 数学 分 析 与 代数 问题 等 ， 这 就 是 现代 随机 分 析 所 研 
究 的 内 容 . 

当 所 二 1 时 ，{f40,n > 1} 是 一 概率 分 布 , 有 以 下 定义 : 

定义 如 果 f= 1, 记 p= 可 Xn 的， 则 ji 表示 从 i 出 发 再 回 到 i 的 平均 回转 
时 间 . 车 /< x, 称 i 为 正常 返 态 ; 若 /4; = ~, 称 ; 为 零 常 返 态 . 口 





3.3 ”状态 的 分 类 


定义 如 果 集 合 {n :mw > 1.pi5 > 中 和 由 称 该 数 集 的 最 大 公约 数 d(i) 为 状态 ; 的 周 


期 . 若 da) > 1， 称 i 为 周期 的 ， 者 qd 二 1, 称 i 为 非 周期 的 . 口 
例如 在 $ 3.1 的 例 (2)( a) 无 限制 随机 游 动 中 , 当 > = 0.0<p<1 时 ，5 = 
{1 ,1,0,1,2 pe Se .}， 即 状态 0 的 4(0) = 2, 即 
从 0 状态 出 发 用 经 2 的 整数 倍 次 游 动 才 能 回 到 0 状态 ， 故 它 是 周期 的 ， 日 局 期 为 2. 当 
p47>0 且 p+g+7=1 时 ，{n: n>1,p) > 0} = {1,2,3 3，……} 4(0) = 1, 故此 时 0 状 
态 是 非 周 期 的 . 
定义 知 状 态 i 为 正常 返 的 且 非 周期 的 ， 则 称 i 为 遍历 状态 . 口 
例 2 设 马 氏 链 的 9 = {1,2,3,4}, 转移 概率 矩阵 为 : 
3 3 00 
| 
0 $30 
3 0 30 
该 链 各 状态 的 转移 如 下 图 所 示 : 
1 
3 一 ? 人 





因为 


fl =0.n>1, fs=0<1, 


9 ‘ 9 
1 2 
f=5, f=0,n22, f=3<1 


故 状态 4 和 3 非常 运 ; 由 


fi 2 和 一 
2 





fry = 5 fl a ee 
n=1 
=n 起 =1x3+3x = < 
1 11 5 5 ， 
二 
4 i Fa) = 1x014 Ls 1 二 3< co 
Na2 一 站 让 2 3 1 Dn-1 一 4 
得 1 


故 状态 1 和 2 都 是 正常 返 的 ， 且 易 知 它们 是 非 周期 的 ， 从 而 是 遍历 状态 . 
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下 面 讨论 各 状态 的 若干 性 质 以 及 如 何 利用 转移 概率 和 完 阵 P 来 判断 是 否 为 常 返 状 态 
pW 与 1 9 有 以 下 关系 : 
定理 3.3.1 对 vi,;e5S,n>1, 有 


1 oo 
Zi ) = (7) (2 一 1) 
-> fir py (3.3.1) 
2 已 
#0 = pi VI) + pijln=1); (3.3.2) 
有 天 7 
3 © 
dy > 0, (3.3.3) 
ioj 人 SO fi>0H8f;;>0. (3.3.4) 
证 : 1” 因 为 





{Xo= i, Xn = 7} ={X0= 7, Xn = 7} NU 二 
l= 


={(J(Xo = =7 7 = D(X = i X=,T; =0)}, 

















dd I>n 

而 

(J{xo 国庆 人 了 全 1 0, 

I>n 
所 以 

{Xo=i Xa = = (J{X0=6 X= 7 T= 
Es 
于 是 
P(Xo=i):P(X, =j|Xo= i 
=》 P(X0=i). PD; = Xo0=i). PE = /Xo0=1i,T;=)), 

因此 


P(X = j|Xo =i) 


nN 
=》 PT =X0=i). P(X =j|X0=i Xr Aj1l<k<1l—1,X=)) 
1s 


-二 多， P(X =j|X1=j)) ”( 由 马 氏 性 ) 
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-> , (D er 1) 
PP 》 


3.3 ”状态 的 分 类 














即 
志和 
2” 当 n=1 时， 显然 有 及) = pij. 下 面 考虑 n> 1 的 情况 . 
由 于 
I 
kz) 
因此 有 
P(Xo=iP(T) =n|Xo=i)= Sj P(Xo P(X1 = k|Xo=iP(X, = j|X1 = k, Xo 
Kz 
由 马 氏 性 得 


二 
用 = >》 Di 及 全 ) 


Le) 
综 上 ， (3.3.2) 式 成 立 . 
3 ” 当 i 一 7 时 ，3nm > 0, 使 pt’) >0. 取 n= min{n: pl > 0}, 则 





(0 (20) 0 
fiy 了 = Dij 


因此 
= 2 > 


六 守 
即 i 一 7 时 ， fi; >0. 
反之 , 当 所 >0 时 ，3m, 使 10 >0, 从 而 pW ?>0, 得 i 一 j. 综 上 所 述 


Vo 0 


同 理 ;一 i 时 ， 有 : 7 一 i 全 所 :>0, 故 











ioj) 人命 fi;>0 有 8 fi;>0. 





定理 3.3.2 状态 ; 为 常 返 态 ， 当 且 仅 当 











让 


WE (3.3.5) 


站 过 提 


状态 ; 为 非常 返 态 ， 当 且 仅 当 


= < cc， (3.3.6) 
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证 : 约定 pi =1,f0 =0. 由 (3.3.1) 式 有 
pl -DA 


令 To {f0}(i > 0) 的 母 函数 分 别 为 : P(p),F(p). 即 





Plp)= pp, Flp)= 》 jp 
n=0 n=0 
区 
RnR) on nD) (nn 一 7 1 9 n— 这 = 
Da . et 7 = (> fF) »)( pl Jp | 
n=1 1=1 Rl 
-OO -fF0) Dol pr = Fp) Plp) 因为 外 =0 
如 
而 
Da ie a ty Rp (0) 00 = ES 
n=0 
因此 


注意 到 ， 当 0<p<1l1 时 ，F(p)< fii<1, 故 


1 
又 因 对 一 切 0 < p < 1 及 正 整数 W, 有 
Spy "< P(p) < yh (3.3.8) 
n=0 n=0 
且 当 p11 时 P(p) 不 减 ， 故 在 (3.3.8) 式 中 先 令 p11, 后 令 NN 一 xo 可 得 
lim P(p)= > pt), (3.3.9) 
pt n=0 
同 理 可 得 a 
lim F(p) = f= fi (3.3.10) 
A 胞 二 0 





于 是 在 (3.3.7) 式 中 两 边 令 pT1, 由 (3.3.9) 式 和 (3.3.10) 式 便 可 得 定理 的 结论 . 
为 解释 定理 3.3.2 的 直观 意义 ， 令 
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1, Xn -> 了 
(i) = | 











0， Xn zi 


3.3 ”状态 的 分 类 


i) 二 Sn). 


n=0 


则 5S(2) 表示 马 氏 链 {X,,n > 0} 到 达 i 的 次 数 . 于 是 


E{S(D|Xo=i} = > BI(i)|Xo=0) > RE =i|Xo = 让 = 3 (3.3.11) 
可 见 并 zol 表示 由 i 出 发 返回 到 i 的 平均 次 数 ， 当 i 为 常 返 态 时 ， 返 回 i 的 平均 次 数 
为 无 限 多 次 ， 反 之 亦 然 ， 当 i 为 非常 返 态 时 ， 再 回 到 i 的 平均 次 数 至 多 有 限 次 . 

推论 1 若 ; 非常 返 ， 则 对 任意 ;ec S. 有 





和 ap) < cc， (3.3.12) 
WL 
lim pt? =(0, (3.3.13) 


证 : 由 (3.3.1) 式 两 边 对 n 求 和 得 


和 
(n) f°) ph 0) (D, (2 一 中 
2 Fi 


- 
tt St 
N 性 一 
半生 7 > < 


ft 3 二 0 


N nn VY 


I=1 


令 N 一 xx, 则 


Do sD (+ ) st Ps < 
二 二 况 汪 二 nn 二 


由 此 即 得 (3.3.12) 式 ， 又 因为 px > 0, 所 以 (3.3.13) 式 也 成 立 . 品 
推论 2 若 7 为 常 返 态 ， 则 
1” 当 :一 时， 有 


(3.3.14) 

村 三 坟 

2” 当 ; 力 7 时 (不 可 达 ), 有 | 
人 0. (3.3.15) 

况 宇 1 


证 : (3.3.15) 式 显然 成 立 ,下 面 证 (33,14) 式 . 因 i 一 j, 故 n>0, 使 DB" >0. 而 


十 
到 六 n) = > pi py > pr. py’, 
Re 
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故 
3 人 pl Sa (2) 一 


于 过 二 二 





此 即 (3.3.14) 式 . 
下 面 再 从 概率 意义 考察 常 返 性 质 ， 记 


2 


nN 二 mm 











9i; =P{S1(j) = +o0|Xo = = P{Sm+1()) = +o0|Xm = 


事件 {5%,(7) = 十 %c} 表示 从 时 刻 mm 起 系统 无 穷 多 次 到 达 状 态 7. 我 们 有 : 
3.3.3 对 任意 ;ze 5, 有 


ee 所 ， 如 了 常 返 ， 
. 0， 如 ;7 非常 返 . 


证 : 因 {Sm{j J 之 十 1} G {Siats ) 二 k}, 故 


(3.3.16) 


(5S1(7 = Ns ) > 8} = lim {51(7) > 全. 


由 概率 的 连续 性 可 得 

gi; = P{S1(7) =+oo|Xo = = 村 A Ql (S1(7) 之 天 )|Xo = i P{91(7) > k|Xo = 三 :1 
(3.3.17) 

叉 


{5S1(D) 2k+1, Xo0=}= {Dj =,57) =k+1}= {Dj;=7,5(7) > 4}. 
TE I=1 
故 
P{S1(j) >+TI1Xo= 计 = SP = Xo0=iP{Si1()) > FXo =iT; =1} 


FL 


-0 ) > FXo = i Xm zi.l<m<I—1.X= 7)) 
2 FP{Si41(j) > Xt 二 让 (由 马 氏 性 ) 
Fs 


SS fP{S1(j) > Xo = 办， (由 时 齐 性 ) 
未 
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即 


P{S1()) > Ek+1Xo0=i}= fiP{S1()) > k|Xo= 让. (3.3.18) 


3.3 ”状态 的 分 类 


反复 利用 上 式 可 得 
P{S1(7) > E+1Xo0=i) = fio(fj))". (3.3.19) 


令 丰 一 <, 若 了 常 返 即 方 =1, 则 由 (3.3.17) 及 (3.3.19) 得 


gi; = fij, 
若 7 非常 返 ， 即 f;; < 1, 则 
9ij 二 0. 口 
定理 3.3.4 状态 ; 常 返 ， 当 且 仅 当 g;; = 1; 者 状态 :非常 返 ， 则 g;; = 0. 
证 : 将 (3.3.16) 式 中 ;7 换 成 i 即 可 得 . 口 


定理 3.3.4 的 说 明 : 着 i 常 运 ， 则 系统 从 i 出 发 以 概率 1 无穷 多 次 返回 i, 即 从 出 发 
的 几乎 所 有 样本 轨道 无 穷 多 次 回 到 i . 若 i 非常 运 ， 则 从 i 出 发 几乎 所 有 样本 轨道 至 多 有 
限 次 回 到 

进一步 地 ， 知 i 为 常 返 态 ， 如 何 判 别 它 是 零 常 返 的 或 遍历 的 ? 我 们 有 以 下 的 重要 定 
理 . 

定理 3.3.5 设 {Xn,n > 0} 是 一 常 返 的 马 氏 链 〈 即 状态 空间 5 是 单一 的 常 返 类 )， 则 
对 于 任意 的 i,j ES， 有 

. 1 0 1 
Lm 了 全 人 (3.3.20) 
下 面 利 用 实 分 析 的 一 个 结果 ， 来 证 明 该 定理 。 
引 理 3.3.1 设 办 级 数 5 anzZ™ 在 0<z<l1 收敛 ， Un 非 负 ， 记 


co 
= ,az",0<z<1 


相关 站 





则 
i = lim, (1 —z)A(z). (3.3.21) 


pn 刀 十 


这 个 引 理 由 Hardy 与 Littlewood 给 出 ， 有 兴趣 的 读者 可 参见 E.C.Titchmarsh 的 《 郴 
数论 》 (中 译本 ) 。 
定理 3.3.5 的 证 明 ee " 作为 引 理 3.3.1 中 的 4(z) , 于 是 由 (3.3.21) 





2 = lim (1— 2)Pi(z). 


i 如 十 n+l 


由 定理 3.3.2 的 证 明知 ， 对 i 去 有 79 





Pij(z) = Fij(z)P;;(z) = 
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因此 ， 对 i 二 7 有 

















Pe 
因为 lim Fj(z)= Pi(1)= 所 =1， 所 以 
lim (1—z)Ps(z)= 1 1 
ea ZJfiijlz) 二 2 1 二 Fj(z) 
这 个 结果 显然 对 i = 7 亦 成 立 。 而 由 洛 必 大 法 则 有 
lim i lim 
:>i-01— Bj(z) :>i-0—P(z) Fll) 
而 Do 
Bi = 2 = 
R= 


由 分 析 中 的 结 直 果 易 知 ， 若 极限 ln 一 cc pl 存在 ， 则 有 





i 名 ss 二 (FR) 
a Pi = dim, 十 22 
由 此 及 定理 3.3.5 不 难得 到 : 
定理 3.3.6 设 i 常 返 旦 周期 为 a. 则 
Jim 和 EE (3.3.22] 


Ki 
其 中 ji 为 i 的 平均 回转 时 间 ， 当 jw = +% 时 ， 理 解 为 万 =0 
证 明 类 似 定理 3.3.5 的 证 明 ， 只 须 令 y= zo 对 PP;(y) 用 引 理 3.3.1 且 考 虑 到 i= j 
时 便 可 得 (3.3.22) 式 . 
定理 3.3.7 设 ; 常 返 ， 则 
1 ”为 零 常 返 ， 当 且 仅 当 














2。 i 为 遍历 ， 当 且 仅 当 
lim o =— >0. (3.3.23) 


及 一 Co Hi 


证 : 1° 若 i 零 常 返 ， 则 由 (3.3.22) 知 lm ,x pW = 0, 由 周期 的 定义 知 当 n 不 
能 被 a 整除 ( 即 n 关 0 mod da) 时 ， pl) 二 0. 故 有 





pl 人 1 一 0. 


反之 ， 着 lim,_,w pt = 0. 假设 i 是 正常 返 、 (3.3.22) 式 知 lm ,wp > 0, 矛 


3.3 ”状态 的 分 类 


设 lin se pu) 志 > 0, 由 1° 知 2 必 为 正常 返 ， 且 lng pie® = es EE 
(3.3.22) 比较 得 4 = 1, 故 i 遍历 反之， 由 定理 3.3.6 即 得 . 口 
状态 相通 关系 为 等 价 关系 ， 因 为 具有 


1” 自 反 性 : i oi 这 由 下 面 定义 可 得 


人 | 0, jz 

2 ”对 称 性 : 若 ; 一 1 则 7 一 和 

3 传递 性 : 若 i 喇 7 且 7 品 kk, 则 i 品 . 

传递 性 的 证 明 如 下 : 由 于 i 嘻 j 六 7 守则 3m,w, 使 p> 0,pi >0, 则 

Bi = Dp pe > pe :pir >0. 
TE9 

故 i 一. 同 理 可 证 天 一 1 故 ;天 . 口 

利用 等 价 关 系 ， 可 以 把 马 氏 链 的 状态 空间 分 为 若干 等 价 类 .在 同一 等 价 类 内 的 状态 
彼此 相通 ; 在 不 同 的 等 价 类 中 的 状态 不 可 能 彼此 相通 ， 然 而， 从 某 一 类 出 发 以 正 的 概率 
到 达 另 一 类 的 情形 是 可 能 的 ， 由 上 知 对 于 不 可 约 链 ， 又 有 以 下 的 定义 : 








定义 如 一 马 氏 链 的 所 有 状态 属于 同一 等 价 类 ， 则 称 它 是 不 可 约 链 . OD 
为 说 明 这 些 概 念 ， 考 虑 下 面 儿 个 例子 . 
例 3 
(a) 
1 1 1 
2 4 4 
9 = {1,2,3}, P= 了 0 3 ， 
0 3 和 
(b) 
3 000 
加 3 0 0 0 
S={1,2,3,4,5}, P=|,.0 0 0 10 
0 0 0 
0 0 0 1 0 
(5) 


Es 
人 
ke. 
ee 
CD 
Les 
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利用 各 种 情况 下 的 状态 转移 图 进行 判断 . 
(a) 由 于 所 有 状态 相通 ( 见 图 (a)), 组 成 一 等 价 类 ， 故 该 链 是 不 可 约 链 . 


1 3 
4 4 
1 1 
GCC 0! 
计 
4 
(a) 


(b) 此 链 可 分 为 两 个 等 价 类 {1,2} 及 {3,4,5}( 见 图 (bp)). 


本 
CC gD: 
1 


(b) 





(c) 此 链 可 分 为 三 个 等 价 类 {1,2,3},{4} 及 {5}( 见 图 (c). 由 位 ,2 3} 可 进入 { 或 
{5}, 有 反之 则 不 行 . 





© 





证 : 先 证 对 Vi,;€ 5S, 有 0<gij < fi. 这 是 因为 











CO 


{Tj < %} = {T=} 


六 三 


= (J{Xo=iX zj0<1<n,X, = (J {Xo = i = 站， 
入 二 具 让 
而 82 


oo oo 
{Xo=%651(j)=+2%}= (| UU {Xo0=i,X, = Cc (J{Xo=i,X, = 让， 
m=1 n=m n= 二 1 


3.3 ”状态 的 分 类 


0< gi = P(S10) = +eclXo = 站 < PT < +ecc| To = 站 = fi. 
因 i 一 j, 存 在 m>0, 使 pl >), 双 对 Vhes5， 


{Xo =%i, Si1(h) = 十 xc = UJ) {Xo =% Xn = k, Snri(h) = +%), 
RES 


有 


om = Do PS lh) = +o0X0 = Xm = = Dp gm 
RES RES 


又 因 i 为 常 返 态 ，fi;=1 故 
0=1- fi= Dp Y pg = ph (1 gw) > p71— gii) >0. 


kKES RES KES9 
从 而 1=gji <fii<1l 得 fj;=1. 故 7 一 i. 
设 pW =a>0.pW) =B>0. 由 C-K 方程 知 ， 对 任意 m>0, 有 


A > 2 . 2 ， p=a =aw.8 .2 )， (3.3.24) 


12 


由 i 和 常 返 及 定理 3.3.2, 有 pt) = >c. 从 而 


Sy 
jj 


4 














故 7 常 返 . 
对 于 相通 的 状态 ， 有 : 
定理 3.3.9 车 iooj 则 
1” 1 与 j 同 为 常 返 或 非常 返 ， 阁 为 常 运 ， 则 它们 同 为 正常 返 或 同 为 零 常 返 ; 
2。” 1 与 7 或 有 相同 的 周期 ， 或 同 为 非 周 期 . 
证 : 1” 的 前 一 部 分 是 定理 3.3.8 的 直接 推论 现 设 7 为 零 常 返 ， 由 定理 3.3.7 有 
ln sp =0. 由 (3.3.24) 得 lm ,x pi = 0, 故 i 也 是 零 常 返 . 
同 理 可 证 ， 若 i 为 零 常 返 ， 由 





DTH > pl pl) ph = Pro pH) (3.3.25) 


可 知 ; 也 是 零 常 返 . 

2。 仍 令 of = a > 00) = B > 0, 设 i 的 周期 为 dj 的 周期 为 + 因此 对 
Vm € ,3n 二 mt, 使 得 py > 0. 由 (3.3. 83) 大 式 知 ， DW ) > 0, 从 而 nn 十 + 十 s 能 被 4 
整除 . 但 p+ > .p= .8 > 0 所 以 + 也 能 被 4 歼 除 .可 见 ，n 能 被 d 整除 
故 + 能 被 4 整除 ， 反之， 利用 (3.3.24) 类 似 可 推 得 4 能 被 + 整除 .从 而 t=d. o 
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该 定理 说 明 ， 对 相通 的 状态 ， 因 是 同类 型 ， 故 内需 选 出 其 中 之 一 较 容 易 判 别 的 状态 
即 可 . 

例 4 设 马 氏 链 5 = {1,2,3,.…}, 转移 概率 为 pll = $, Dii+l > $, Di ,5 E 5. 分 析 
状态 1. 

由 如 下 状态 转移 图 易 知 : 


工 
2 





所 以 “1 ”是 常 返 态 ， 又 


Co 1 n 
m= Dn (3) < co， 


2 


nn 二 1 


所 以 “1” 是 正常 返 态 . 再 由 pi = > 0, 知 “1” 是 非 周 期 的 . 从 而 “1” 是 遍历 的 . 
对 其 它 i 关 1 因 i ~ 1, 故 i 也 是 遍历 的 ( 若 求 90 则 较 麻烦 ) . 

关于 常 返 态 的 判断 ， 我 们 可 以 总 结 为 以 下 重要 定理 : 

定理 3.3.10 下 列 命题 等 价 : 

1。 i 为 常 返 态 ; 

2° PI1 U(x, =)|Xo= 人 =1; 





3° P(S1(i)=+%|Xo=0)=1; 

4° ph = +eo 
n=0 

De E{S1(i)|Xo 二 计 二 十 00. 

证 : 1” < 2”: 由 于 fi=P(Ti;=x|Xo= 让 =1, 及 








{Ti < col = (J {z: = n} 


84 Se 
=[ {Xo0=i XA,0<1<n, = 计 = {Xo = 1,X, =), 


从 二 水 站 
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因此 
P{LUJGCm = 让 Zoo= 计 = PT < |Xo=i)= fi=1, 


n=1 
即 1” 与 2” 等 价 . 
1 $935“ 见 定理 3.3.4. 
1。 < 全 4" : 见 定理 3.3.2 . 
4°。 < 5。”; 由 (3.3.11) 式 即 得 . 
读者 可 自己 对 以 上 结论 给 出 直观 解释 . 


例 5 直线 上 无 限制 随机 游 动 

设 { 玉 > 1iid.， 了 =0，P 了 =HD=DP 瑟 =-D=o， 令 X=0， 
X= 部， 则 {Xn > 1} 称 为 直线 上 无 限制 随机 游 动 。 易 知 该 马 氏 链 的 全 体 状态 
{ ,一 2, 二 1 0,1,2,….} 构成 一 个 类 。 问 题 是 : 它 是 常 返 类 还 是 非常 返 类 ? 为 此 ， 我 们 只 
需 选 一 个 代表 i 即 可 。 

以 下 我 们 来 计算 学 , p”  ， 据 此 来 判别 i 是 否 常 返 。 易 知 : 











pi =0 
而 
人 (3.3.26) 
考虑 母 函数 
Pi(z) = > Cp"g"z" 
久 二 0 
~ (2n)! 
Ss a (oat 
狼友 各 
C227(—1)” 1 3 2n—1 ee 
上 2 nl 2 2 2 (pgz ) 
1 1 3 27 De 
i( }) (-2) a (- 3 ) -0 ) 
=(1 — 4pgz ) 
从 而 有 


We a 一 分 二 才 ' 三 
oi 去 Pil1) ,1 Pii(2) St 0 . | 
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由 此 知 ，p = 3 时 i 是 常 返 的 ， 从 而 全 体 状 态 构 成 单一 的 类 是 常 返 的 ;，p 了 3 时 ， 链 是 
非常 返 的 。 
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例 6 现在 我 们 讨论 平面 上 的 对 称 随机 游 动 . 质点 的 位 置 是 平面 上 的 整数 格 点 (坐标 
为 整数 的 点 ). 每 个 位 置 有 四 个 相 邻 的 位 置 ， 质 点 各 以 于 的 概率 转移 到 这 四 个 相 邻 位 置 中 
的 每 一 个 ， 易 见 平面 上 的 对 称 游 动 是 周期 为 2 的 不 可 约 链 . 
我 们 来 计算 质点 经 过 2n 步 仍 回 原 位 置 的 概率 ww. 这 时 质点 必须 与 横 坐 标 平行 地 向 
右 移动 上 步 ， 向 左 也 移动 上 步 ， 与 纵 坐 标 轴 平 行 的 向 上 移动 ! 步 ， 向 下 也 移动 ! 步 ， 且 
十 1 二 n. 因此 
a 1 1 


J (2n)! > 1 nn kv2 _ n 2 
Re 0 rh) i 











Un 一 


由 于 学 ++= ,平面 上 的 对 称 的 随机 游 动 也 是 常 返 的 . 
我 们 再 讨论 空间 中 的 对 称 随机 游 动 .。 这 时 质点 的 位 置 是 空间 中 的 整数 格 点 ， 每 个 位 
置 有 六 个 相 邻 的 位 置 . 质点 各 以 的 概率 转移 到 六 个 相 邻 位 置 中 的 每 一 个 .同样 的 ， 空 
间 中 的 对 称 随机 游 动 也 是 周期 为 2 的 不 可 约 链 . 
质点 经 过 2n 步 返 回 原 位 置 的 概率 w, 可 类 似 的 计算 : 
1 (2n)! 
es 
1 1 (n)! 
E i [2 0 下 
220 7N>0JTRSn 37 kn Cojo Ek) 





入 让 二 





a 





对 


这 里 利用 了 三 项 式 定理 : 


1 (n)! 
| jlkl(n 一 了 一 天) 





人 
DR>0,j+R<n 

三 项 分 布 的 最 大 项 在 ; 与 上 最 接近 时 达到 . 仍 由 斯 特 林 公式 可 知 ， 这 最 大 项 与 十 同 

阶 ， 从 而 w 的 阶 数 不 超 过 动 s. 但 是 避 , 5s < x, 因此 与 直线 和 平面 上 的 对 称 随机 游 

动 不 同 ， 空 间 中 的 对 称 随机 游 动 是 非常 返 的 . 

更 一 般 的 ， 4 > 3 维 空间 中 的 对 称 随机 游 动 也 是 一 个 周期 为 2 的 不 可 约 链 ， 此 时 ， 
质点 经 过 2n 步 返 回 原 位 置 的 概率 w 的 阶 数 不 超过 - 坟 . 但 是 车 , -二 7 < x, 因此 d>>3 
维 空间 中 的 对 称 随 机 游 动 是 非常 返 的 ， 然 而 到 直观 上 很 难 找 可 以 接受 的 理由 ， 解 释 为 什 
么 4> 3 维 空间 与 一 二 维 空间 中 的 对 称 随 机 游 动 在 常 返 性 上 会 截然 不 同 ， 这 个 结果 通常 
被 称 为 波 利 亚 (Polya) 定理 . 
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3.4 。 状态 空间 的 分 解 


前 面 已 提 到 ， 马 氏 链 的 状态 空间 可 以 分 为 若干 不 同 的 等 价 类 .本 节 将 进一步 讨论 状 
态 空间 的 分 解 问题 . 

定义 设 Cc5, 称 C 为 (随机 ) 闭 集 , 如 对 任意 ;<sC 及 7J&C, 都 有 Dj = 0. 闭 集 
C 称 为 不 可 约 的 ， 若 C 的 状态 相通 . 口 

引 理 3.4.1 C 是 闭 集 的 充 要 条 件 为 : 对 任意 ieEC 及 j4Cn>1, 痢 有 pl” =0. 

证 : 只 需 证 必要 性 . 用 归纳 法 证 之 . 设 C 为 闭 集 ， 则 由 定义 ， 当 n= 1 时 ,结论 成 
立 . 现 设 n=1 时 对 任意 ie C,j94C 有 pW = 0, 则 

py = DD pp + Dpape = DPR 0+ D0 pr =0. 
hEC RgC REC hgC 

于 是 引 理 3.4.1 得 证 . 品 

易 知 ， i 为 吸收 态 则 等 价 于 单 点 集 {j 是 闭 集 ， 显然 整个 状态 空间 5 构成 一 闭 集 . 

$ 3.3 中 例 3(b) 的 {1.2} 及 {3,4,5} 分 别 为 闭 集 . 

闭 集 C 的 直观 意义 是 自 C 内 部 不 能 到 达 C 的 外 部 ， 这 意味 着 系统 一 旦 进入 闭 集 C 
内 ， 它 就 永远 在 C 中 运动 

定理 3.4.1 所 有 常 返 状态 构成 一 闭 集 . 

证 : 设 i 为 常 返 ， 且 i 一 j 则 由 定理 3.3.7 知 i oj/ 亦 为 常 返 说 明 从 常 返 状态 
出 发 ， 只 能 到 达 常 返 状态 ， 不 可 能 到 达 非 常 返 状态 ， 从 而 定理 得 证 . 品 

今后 用 C 表示 所 有 常 返 状 态 构 成 的 闭 集 全 表 所 有 非常 返 状 态 组 成 的 集合 . 

推论 不 可 约 马 氏 链 或 者 没有 非常 返 状 态 或 者 没有 常 返 状 态 . 品 

定理 3.4.2 设 C 去 0, 则 它 可 分 为 若干 个 相互 不 相交 的 闭 集 {C%}, 使 C= CiU C2 
U i 且 有 

1" _C 中 任 两 状态 相通 ; 

2° Cn 门 C1 =0.h 关 1, 即 Cr 中 任 一 状态 与 C1 中 的 任 一 状态 互 不 相通 ， 即 {Cu } 均 
为 互 不 相通 闭 集 . 

证 : 因 C#0 任 取 iiEC, 令 ={ 人 i:i 叶 和 EE0}), 若 CC 0 再任 取 
i EC-0Ow 令 C= 人 fiiiiCizEC-0C…, 若 C-U1G0 取 isii1 EC-iG; 
令 

nh 
Cri= {fiiioint EEC-()0), .…. 


i 





显然 ， 由 {Ci} 的 构成 即 得 定理 的 结论 . 
推论 状态 空间 5 可 分 解 为 


S=7TUc=TUcUc LU …. (3.4.1) 
其 中 {Ci 为 基本 常 返 闭 集 ， 了 不 一 定 是 闭 集 , 


因此 ， 当 系统 从 某 非 常 返 状态 出 发 ， 系 统 可 能 一 直 在 非常 返 集 工 中 ( 当 了 为 闭 集 
时 ), 也 可 能 在 某 时 刻 离开 了 进入 到 某 一 基本 常 返 闭 集 C 中 运动 . 
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车 5 为 有 限 集 ， 则 有 以 下 结论 : 

定理 3.4.3 若 5 为 有 限 集 则 一定 是 非 闭 集 ， 亦 即 不 管 系统 自 什么 状态 出 发 ， 迟 
早 要 进入 常 返 闭 集 . 

证 : 因 TCS 有 限 ， 又 根据 定理 3.3.4, 系统 至 多 有 限 次 返回 非常 返 态 ， 从 而 只 有 有 
限 次 返回 T. 换言之 ， 系 统 迟 早 将 进入 常 返 闭 集 . 

推论 有 限 不 可 约 马 氏 链 的 状态 都 是 常 返 的 . 即 工 = 四 .3 = C. 0 

引 理 3.4.2 设 CC 5 为 闭 集 ， 只 考虑 CG 上 所 得 的 m 步 转移 子 矩 阵 P4” = 
(227 E Cn, 则 它们 为 随机 矩阵 . 

证 : 任 取 ie Cs, 由 引 理 3.4.1, 有 


让 三 Sp = BD pl + + pt (m) = yp Cn) 


jES jECh 了 BC JEC7 

















显然 ，pW > 0.27 E Cn. 故 局 限 在 C 上 的 PI” = (2 )(i,j € Cn) 为 随机 甜 阵 . 

为 了 计算 与 分 析 的 方便 ， 有 时 我 们 把 状态 空间 中 的 状态 顺序 按 如 下 规则 重新 排列 : 
(1) 属于 同一 等 价 类 的 状态 接连 不 断 地 依次 编号 ，(2) 安排 不 同等 价 类 的 先后 次 序 ， 使 得 
系统 从 一 给 定 状 态 可 以 达到 同一 类 的 另 一 状态 或 到 达 前 面 的 等 价 类 ， 但 不 能 到 达 后 面 的 
等 价 类 由 定理 3.4.2 知 ， 由 常 返 状态 组 成 的 等 价 类 是 一 闭 集 ， 而 由 非常 返 状 态 组 成 的 等 
价 类 不 一 定 是 财 集 ， 于 是 按 上 述 规则 ， 常 返 状 态 的 类 放 在 非常 返 类 之 前 ， 

设 5=CUTC=CUCcU…UGc 及 了 T= 有 HU…UT 这 是 按 上 面 规则 编排 
的 等 价 类 次 序 ， 其 中 C1, C2,…. Cn 是 常 返 等 价 类 ( 闭 集 ), ,41,… :下 是 非常 运 等 价 类 . 
于 是 ， 转 移 概率 和 抢 阵 可 分 解 成 如 下 形式 : 




















Pi 0 0 0 0 
0 P> ， 0 0 0 
Pc 0 
P= 0 0 Si Pp 0 2 E (3.4.2) 
R QTr 
Rh+iil Rpt12 ‘°° Rn  Qh+l 
Rn 1 Rn 2 Rnh Rn h+1 Qn 
这 里 
P1 0 ... 0 Qhii 0 x 0 
0 P2> :.. 0 Rh+2h+l Qhn+2 … 0 
Pe ， QTr = |88 , ， 


0 0 .… Pp Ranh+l Rupt2 … Qn 
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Rbh+i1 Rht12 … Rhtih 


Rh+21 Rh+22 *°* 及 n+2h 


Rn,1 Rn,2 Co 及 nb 
其 中 Pi(1 < 1 < 7 是 局 限 在 C1! 上 的 转移 概率 矩阵 ，Qi(j +I<I<7) 是 局 限 在 五 上 的 


转移 概率 矩阵 . 
以 $ 3.3 例 3(c) 的 转移 概率 先 阵 为 例 ， 它 可 重新 排列 分 解 如 下 : 


则 对 应 的 Pc, QT.R 为 


0.6 0.1 0 
1 0 ee 
Poco= | ;， QT= | 0.2 0.5 0.1 
0 1 





0.2 0.2 0.4 





我 们 还 有 以 下 简单 而 有 效 的 定理 . 

定理 3.4.4 若 转 移 概 率先 阵 按 (3.4.2) 式 的 形式 分 解 ， 则 
1” Pi(1 <1<h) 是 局 限 在 C: 上 的 随机 冠 阵 ; 

2 。 


Pp” 


P” 0 
¢ | (3.4.3) 
R; QF 





其 中 Ri = R,R = RiPc + QY 1!R. 
3” ln sx Q? = 0. 其 中 0 表 零 矩阵 ， 
证 : 1。" 由 定理 3.4.2 及 引 理 3.4.2 即 得 ; 
2 ”由 归纳 可 证 之 ; 
3" 由 定理 3.3.2 推论 1 的 (3.3.13) 式 即 得 . 
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89 
在 实际 应 用 中 ， 人 们 常常 关心 的 问题 有 两 个 : (a) 当 % 一 时，P(Xn = 人)= Ti(n) 
的 极限 是 否 存在 ? (b) 在 什么 条 件 下 ， 一 个 马 氏 链 是 一 个 平稳 序列 ”对 于 前 者 ， 由 于 
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Tj(n) = DDies Ti(0)pty" 故 可 转化 为 研究 p;)? 的 渐 近 性 质 ， 即 li pl) 是 否 存在 ? 若 
存在 ， 其 极限 是 否 与 i 有关 ? 对 于 后 者 ， 实 际 上 是 一 个 平稳 分 布 是 否 存 在 的 问题 .这 两 
个 问题 有 密切 联系 . 


1. P" 的 极限 性 态 
pl 的 渐 近 性 态 ， 在 5 3.3 中 已 有 所 涉及 ， 这 里 分 两 种 情形 再 加 以 进一步 讨论 . 


(1). 7 非常 返 或 零 常 返 
定理 3.5.1 若 ;非常 运 或 零 常 运 ， 则 对 任意 ie 5, 有 
pl = 0. (3.5.1) 


证 : 当 j 为 非常 返 时 ， 上 述 结论 已 在 $ 3.3 定理 3.3.2 的 推论 1 中 证 过 ， 故 只 需 证 
7 为 零 常 返 的 1 情形 . 取 mm < 了， 有 


py’ = 和 op- 1) < > (n— 忠生 > (3.5.2) 

了 全 二 {=m+1 
固定 m 先 令 nn 一 x, 由 3.3 定理 3.3.6 知 上 式 右 方 第 一 项 趋 于 0 ( 因为 功 ) 一 0, 且 
是 有 限 项 的 和 ) ; 再 令 m 一 x, 第 二 项 因 这 1 fe < 1 而 趋 于 0. 故 pe — 0(no >%). 

推论 1 有 限 马 氏 链 没有 零 常 返 状 态 . 

证 : 设 有 某 状态 i 是 零 常 运 , 令 C; = {7 :i 吕 .站 ,由 § 3.3 定理 3.4.2 知 C; 是 相通 
的 常 返 闭 集 , 且 C; E 8 为 有 限 党 由 定理 3.4.4 有 洒 jcc, pW =1(n > 1). 但 由 定理 3.5.1 
知 lim_,x 局 jec, pW = 0, 二 者 矛盾 . 故 9 有 限时 无 零 常 返 状 态 . 

推论 2 不 可 约 的 有 限 马 代 链 的 的 状态 都 是正 党 的 . 

证 : 由 推论 1 及 定理 3.4.3 的 推论 即 得 . 

推论 3 若 马 氏 链 有 一 零 常 返 态 ， 则 必 有 无 限 多 个 零 常 返 状态 . 

证 : 由 推论 1 即 得 . 口 



































(2). 7 为 正常 返 态 

这 时 情况 较 复杂 ，lim -< 区 "不 一 定 存在 ， 即 使 存在 也 可 能 与 ; 有 关 . 但 有 以 下 结 
论 : 

定理 3.5.2 若 ;正常 运 ， 周 期 为 d, 则 对 任意 ieS 及 0<r<d-1, 有 


nd+r7) d 
lm p= fi90) (3.5.3) 
J 


其 中 (7 = Ds a 0<r<dad—l1. 口 
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此 定理 的 证 明 可 见 参考 书 [5]. 
推论 1 若 ; 是 遍历 状态 ， 则 对 任意 的 ie 5, 有 





(n) i E 















































lim p;; (3.5.4) 
n=00 Hj 
推论 2 对 于 不 可 约 的 遍历 链 ( 即 所 有 状态 遍历 ), 对 任意 i,; < S, 有 
ia 和 bE (3.5.5) 
定理 3.5.3 若 7 常 返 ， 则 对 任意 ;< 5S, 有 
i ply = 大 . (3.5.6) 
n>—00N 1=1 Hi 
证 明 参 见 [6 ] 或 站， 
推论 如 不 可 约 马 氏 链 的 状态 是 常 返 状 态 ， 则 对 任意 i.7 € 5, 有 
lim LY p= 1. (3.5.7) 


Pi; = 
n= Nn Bs 
i=} Hi 


该 推论 直观 解释 如 下 : 了 六 ;2 表示 自 i 出 发 在 前 ”个 单位 时 间 内 到 达 ; 的 总 次 
数 ， 故 + i_1pi) 表示 每 单位 时 间 到 达 7 的 平均 次 数 ， 而 十 亦 表示 每 单位 时 间 到 达 j 
的 平均 次 数 ， 故 对 不 可 约 常 返 链 ， 有 : 立 工 /Lp 一 十 . 
定理 3.5.4 着 马 氏 链 是 不 可 约 的 唤 历 链 ， 则 {7 = 二 } 是 方程 组 
CS] 二 >》 za (3.5.8) 
i€S 
满足 条 件 Tj 之 0,7 E 3, Djes zj 二 1 的 唯一 解 . 
证 : 记 = 十, 由 定理 3.5.2 推论 2 有 


1 
Lim 人 = = nj. 
Hi 
对 任意 mn,M., 有 
1 和 > 下 
JES 
固定 M, 令 了 一 =, 可 得 全 和 fj < 1: 再 令 M 一 x, 知 
学 
》 <1. 
J€S 


由 C-K 方程 有 


1 
pi > 
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如 令 n 一 oo, 则 得 > 以 Tp 再 令 M 一 x, 有 


万 > 》 np, vies. (3.5.9) 
IES 
将 (3.5.9) 式 两 边 乘 以 pj;; 并 对 7 求 和 ， 得 


Ti 之 TD > DS mp 


JES 1ES 


重复 上 述 步 又， 得 mi > Dies Ti 史 对 所 有 j < 5 及 n> 1 成 立 . 现 设 上 式 对 某 个 5 严 
格 不 等 式 成 立 ， 即 ri > 并 ics 和 zy ) 那么， 将 此 式 对 了 求 和 ， 有 


D> rp = mp = nm 
jES JESIES i€S 


了 ES i€S 
但 这 是 不 可 能 的 .于 是 对 所 有 nn 及 j, 有 





= nip 


(3.5.10) 
i€ES 


由 于 并 jcsm <1, 且 pl 关于 n 一致 有 界 ， 故 在 (3.5.10) 式 中 令 n 一 时， 由 控 
制 收敛 定理 ， 有 


i€S 


= lim n pi = (> i) 














Tj. 
i€ES 
由 于 7 > 0, 故 得 
On = 
iES 
现 证 唯一 性 . 设 {v;} 是 满足 条 件 的 另 一 组 解 ， 则 类 似 (3.5.10) 有 
Dj mt Dvipij = 二 二 = ai) . 
i€S i€S 
令 n 一 20 则 有 
vj 二 > vi lim p;;, 一 Ti (>， vi) = 7 
i€S i€S 
2. 平稳 分 布 


定义 一 个 定义 在 3 上 的 概率 分 布 = fm 态 … ,Ti 上 称 为 马 氏 链 的 平稳 分 布 ， 
如 有 


T 二 T 卫 . (451 
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即 Y7 < 59， 
一 DY nip 口 (3.5.12) 


i€S 
平稳 分 布 也 称 马 氏 链 的 不 变 概率 测度 ， 对 于 一 个 平稳 分 布 7, 显然 有 


r=AiP=7AP =...=7P". (3.5.13) 





定理 3.5.5 设 {Xn.n > 0} 是 马 氏 链 ， 则 {Xn,n > 0} 为 平稳 过 程 的 充 要 条 件 是 
7(0) = (7i(0),i ES) 是 平稳 分 布 ， 即 


7(0) = T(0) 了 . 
证 : 充分 性 . 记 7(0) = 7, 显然 
7(1)=x(0)P=7ArP=7, 1 7n)=A(n—-1l1)P=7rP=7. 


因此 Viis Ee St EN,n>1,1<k<nteN 有 


(tn —tn—1) 


A 


网 到 表 
PP( = i1, Kes = i Ke, = in) 一 Ti (1) pt .op 
to—t (tn—tn—1) 
= (t1 + tp io J).. Di 


=P(Xi+t = 二 入 


所 以 {Xn > 0} 是 严 平稳 过 程 . 








必要 性 . 由 于 {Xn,n > 0} 是 平稳 过 程 ， 因 此 有 7(n) = x(n 一 1) = …=T(0). 又 由 
7(1) = 7(0)P 得 (0) = (0)P. 即 r(0) 是 平稳 分 布 . 

由 定理 3.5.4 有 以 下 结论 

定理 3.5.6 不 可 约 记 历 链 恒 有 唯一 的 平稳 分 布 {xi = 十 }, 且 万 = lm < ply 














对 于 一 般 的 马 氏 链 ， 其 平稳 分 布 是 否 存在 ? 若 存 在 ， 是 否 唯一 ? 有 以 下 的 定理 . 

定理 3.5.7 令 Cj 为 马 氏 链 中 全 体 正 常 返 状态 构成 的 集合 则 有 : 

(a) 平稳 分 布 不 存在 的 充 要 条 件 为 C+ = 0; 

(b) 平稳 分 布 唯一 存在 的 充 要 条 件 为 具有 一 个 基本 正常 返 闭 集 Cs = C+: 

(c) 有 限 状态 马 氏 链 的 平稳 分 布 总 存在 ; 

(d) 有 限 不 可 约 非 周期 马 氏 链 存 在 唯一 的 平稳 分 布 . 

(a) 充分 性 . 用 反 证 法 ,假设 该 马 氏 链 存在 一 个 平稳 分 布 x 天 0, 则 由 平稳 分 布 定 

义 知 有 六 =rP, 则 >1lr=rP=，…=TP" 让 7 一 >. 因 C+ = 小 故 该 马 氏 链 中 均 
是 零 常 返 态 或 非常 返 态 ， 而 由 定理 3.5.1 知 P"” 一 0, 当 nn 一 ow 时, 与 + 关 0 矛 盾 - 所 以 
该 马 氏 链 不 存在 平稳 分 布 

必要 性 . 仍 用 反 证 法 ， 假 设 C+ 天 水 不 纺 设 C+ = C 只 有 一 个 正常 返 的 闭 集 ， 则 类 
似 于 定理 3.5.4 可 以 证 明 该 马 氏 链 限制 在 C 上 存在 一 平稳 分 布 ri 使 ri = xiPi, 其 中 Pi 
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是 一 步 转移 概率 抢 阵 P 在 C 上 的 限制 . 即 P = | . | 此 时 只 需 取 r = (71,0)， 
卫 


则 有 rP = (ma,0) | 本 ) = (riPl,0) = (x1,0) = 7. 可 见 ，7 是 平稳 分 布 ， 与 平 
稳 分 布 不 存在 矛盾 故 C+ = 0. 
b) 充分 性 . 因 该 马 氏 链 只 有 一 个 基本 正常 返 闭 集 ， 故 类 似 于 定理 3.5.4 可 证 明 该 马 
氏 链 存在 唯一 的 平稳 分 布 . 
必要 性 ， 首先 ， 因 它 存在 一 个 平稳 分 布 ， 故 由 (a) 知 C+ 冯 0. 又 不 妨 假设 其 常 返 状 
态 集 可 分 解 为 两 个 常 返 闭 集 的 并 ， 即 Cj = C6 U Co. 则 易 知 一 步 转 移 概率 和 矩阵 P 可 写 为 
P1 0 0 
P=| 0 P， 0 |. 其 中 PiPs* 分 别 是 P 在 Cu.Cs 上 的 限制 . 类 似 于 定理 3.5.4 可 
R1 R Qr 
证 明 存 在 ri,ra 使 得 ri = ziPi, 且 rs = roP:, 若 取 rr = (ri,0.0)j,r' = (0,72.0), 则 易 知 
TP = (riP1,0,0)== (m1,0,0)=7, TP = (0,72,0)=w. 可 见 7 与 7 均 是 平稳 分 布 ， 与 
唯一 性 矛盾 故 该 马 氏 链 只 有 一 个 基本 正常 返 闭 集 Cs = C1. 
(c) 由 定理 3.4.3 及 定理 3.5.1 的 推论 1 可 知 ， 有 限 状 态 马 氏 链 总 存在 正常 返 状 态 ， 
即 对 有 限 状 态 马 氏 链 总 有 C+ 天 四 故 由 (a) 知 它 的 平稳 分 布 总 存在 . 
d) 由 定理 3.5.1 的 推论 2 及 定理 3.5.6 易 得 . 

















3. limnv < Tj(n) 的 存在 性 


下 面 我 们 来 研究 lm > zj(n) 的 存在 性 问题 . 

定义 着 lim Tij(n) 二 wy(7 E 5) 存在 则 称 z* = {xi,… ,个 ,…|]} 为 马 氏 链 的 
极限 分 布 . 

定理 3.5.8 非 周 期 不 可 约 链 是 正常 返 的 充 要 条 件 是 它 存 在 平稳 分 布 ， 且 此 时 平稳 分 
布 就 是 极限 分 布 . 

证 : 充分 性 设 存在 平稳 分 布 r = {7zi……: 石 … 小 由 此 有 7r=TP=TP"”=…= 
frP", 即 mr = Dies TipW ,由 于 ;>0， en = 1, 当 mn 一 o%, 利用 控制 收敛 定理 ， 极 
限 号 与 和 式 可 交换 ， 得 


Ti) = lim i 六 (lm pe = 0, Ti): a 一 ss 


5 i€S i€S 








因为 Djes Tj 二 Djes 站 三 小, 于 是 至 少 存在 一 个 Ti 二 >0, 从 而 
lim pe) = —g40, 


即 yi < ~ 故 1 为 正常 返 状态 ， 由 不 可 约 性 知 ， 整 个 链 是 正常 返 的 ， 且 所 有 7 = 让 > 0. 


3.5 “了 P" 的 极限 性 态 与 平稳 分 布 


必要 性 .由 于 马 氏 链 是 正常 返 非 周 期 链 ， 即 为 遍历 链 ， 由 定理 3.5.6 立即 得 证 ， 且 所 
有 m= 人 = 击 , 7 E58. 口 

由 上 可 知 ， 对 于 不 可 约 遍历 链 ， 则 极限 分 布 r” = 7 存在 且 等 于 平稳 分 布 ， 这 意味 着 
当 n 充分 大 时 ， 





i 
Hj 
即 {X,n > 0} 是 一 渐 近 平稳 序列 .这 在 实际 问题 中 是 很 有 意义 的 . 
例 1 设 
3 1 
st | | 
二 


求 平稳 分 布 及 lim < P” =? 
解 : 由 7=7P 得 i 一 3ri 二 3x2 及 hi 十 72 二 1, 解 得 7 一 2,72 一 3, 故 


; (n) 1 
由 lin ~ 全 故 


< 7 二 
HKI1 一 5 KH2 二 
且 


lo 中 | 

0olw | 

LL = 二 戈 

-ceo -er 

~ ~ 

el 
口 


im 了 = | 3 
例 2 设 {X,,n > 0 为 艾 伦 费 斯 特 链 . 5 = {0,1,2,… ,2N}, 转移 概率 为 
pii =0(0 < i < 2N), 
2N—i, 


Pii+1 一 2 (0<i<2N—1), 


Pii-1 二 7 (1 <i<2N). 


求 此 链 的 zj 及 jj (ie 5). 





解 : 由 7 = 7P, 得 

不 1 

70 二 7N， 
2N_i+1l 十 1 

Tt 1 Si<2N-l, 
T2N-1 

T2N oN 。 

| 95 
解 此 方程 组 得 
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又 因为 了 ?um = 1 因此 xo = 2- 交 ,于 是 有 


Mi= CN2 N, 1<i<2N. 


再 由 y= 去 得 
sw (ON — i)! 
(GN 





,0<i<2N. 








Hi=2 





4. 求 和 (积分 ) 与 极限 交换 的 原则 


下 面 罗 列 几 个 关于 求 和 (积分 ) 与 极限 交换 的 重要 定理 , 这 些 定理 可 以 看 成 是 实 变 函 
数理 论 中 有 关 定 理 的 推广 . 
定理 3.5.9 (Levy 单调 收敛 定理 ) 设 r= (rie 5) 是 行 向 量 , x; > 0,Yie 5, 着 列 向 


量 序列 {f)}, f(") = CF es a …)T, 满 足 0<fD < <f00 < Pt+D < ... 
且 lim,_,x f=f. 则 





nf = lim nf("), 


即 














Dj ( lim = liny Ti)， 
iES 用 一 Co 及 一 CO fes 


列 {f(%)}, f(") 二 (a WO se wt ) 满足 不 (lim inf, ,~ fo < lim inf;, ,~ Afl™) 
且 lin foo 全 f 存在 则 


Af < lim inf xf(™. 口 


定理 3.5.11 (Lebesgue 控制 收敛 定理 ) 设 ”= (7i,ieE 5) 是 行 向 量 ,，7; > 0.vie5, 
车 列 向 量 序列 {f3)}, = (及 满足 8 > 0, = 作用 
Ce,e 一 (1, 1,. SO )T,c > 0 为 常数 ， 且 limn ,~ ft") =f 存在 . 则 

















nf = lim 7Tf(2). 
R= 


$ 3.6 ”离散 时 间 的 Phase - Type 分 布 及 其 反问 题 


本 节 讨 论 离散 时 间 的 Phase - Type 分 布 及 其 反问 题 ， 先 给 出 它 的 定义 。 
定义 设 {X,n > 0 是 M.C., 状态 空间 5 =gU50, $= {1,2,..,p} 为 瞬时 态 集 ， 


办 | | 关中， 为 


) 
gl 


3.0 离散 时 间 的 Phase 一 Type 分 布 


阵 ，Po = (I-P)je，e= (1,1,… ,1)7 为 p 为 单位 列 向量 ,， 7 = inf{n:n>0,Xn,€ 50}， 
称 7 为 从 瞬时 态 集 到 吸收 态 集 的 首 达 时 间 , 称 7 的 分 布 为 Phase-Type 分 布 (简称 PH 
分 布 ). 

令 r(0)=(aoaj， 其 中 =(at ap)，o>0，>hesm=1。 外 =Pr= 
k), gr(i) = P(r = kXo=i), gx = (gr(i)i € S$)7, gi,N) = EXo=i), 
g(N\)= (gi,N),iES), gMN)= BEN)= Dog 。 

下 面 先 求 7 的 分 布 {gi,k > 1} ， 7 的 条 件 分 布 向 量 {gx,h > 1} ， 及 其 生成 函数 。 
有 如 下 的 定理 : 

定理 3.6.1 在 上 述 记 号 下 ， 有 

1 。 








90 二 Qo, VEh > J 


gr = aP*-!Po = aPp*-!1(IT — Pye: (3.6.1) 


D2 g0—=€,， vi >1， 有 


gx = P*-!Po = aPp’*-!(I— P)e: (3.6.2) 

3”Y0< 和 <1,， 有 
g(N) = ao + Ma(I— AP)-!(I- Pye. (3.6.3) 
g(A) = XI- AP)- ‘(I- P)e. (3.6.4) 


证 明 1” 用 数学 归纳 法 。 





k 0 时 ， 90 P(T 0) P(Xo E S50) 二 G0， 

k=1 时 ,gi = P(r7 =1)= P(Xo € 5,X1=0)= > aipio = QPo, 
i€S 

k =2 时 , gs = P(7 = 2) = P(Xo € S$, Xi € $, X» € 90) 


=> > P(Xo=i, XI 三 小气 2 =0)=> appo = a:P .Po, 


i€ES jES i€ES jES 

















假设 = n 时 命题 成 立 ， 即 : 9 = aP"*-1Po = aP"*-1(I 一 P)e， 则 当 尺 =n 二 1 时 ,可 
以 仿照 上 面 作 如 下 的 事件 分 解 : 1) 从 初始 状态 i 转移 一 步 到 ; ， 2) 以 ;7 作为 初始 状态 
然后 转移 n 步 被 吸收 ， 则 结合 归纳 假设 有 





gn+1= P(7=n+1)= aPP"- Po Map"Po = aPp™t+Y-1iPo = aPp"(I— Pye 


知 当 上 =n 十 1 时， 命题 成 立 。 


第 三 章 马尔 可 夫 过 程 


综 上 有 : VkeEN, go=aQao0, gn = QP*-iPo=aP*-!i(I— P)e, 
2” 类 似 于 1 ”的 证 明 ， 即 得 (3.6.2) 式 ， 

3” 为 了 证 明 3 ”我 们 先 给 出 一 个 引 理 : 

引 理 设 拢 阵 8 满足 lim ,~ Q” =0， 则 (I Q)"* 存在 , 且 


I-Q)!=) 0 (3.6 攻 
Kk=1 


其 中 工 为 单位 矩阵 。 
证 : 因 
II-Q).(I+Q+Q+…+Q" =I-Q". (3.6.5) 
由 已 知 有 :lim,_,x Q”= 0. 故 行列 式 下- Q"| 一 1, (mn 一 %), 所 以 ， 当 nn 充分 大 时 ， 
I 一 Q"| 冯 0, 从 而 





I- QI+Q + +Q" |#0. 


这 只 当 上 式 左边 两 个 行列 式 均 不 为 0 时 才 成 立 . 于 是 : |I 一 Q| 冯 0, 即 (I1- Q)-! 存在 . 
以 (I 一 Q)-! 左 乘 (3.6.5) 式 两 边 ， 并 令 n 一 < 则 得 (3.6.4) 式 . 

以 下 证 明 3”: 

将 gx 与 gx 的 表达 式 分 别 代入 9(A) = Dh-og9r 和 * 及 g(^) = 二 导 ogkr 入 中 ， 并 注意 
到 5 为 瞬时 态 集 ， 故 lim P" =0， 用 引 理 即 可 得 3” 。 

在 理论 与 实际 应 用 中 ， 和 常常 感 兴趣 的 问题 是 所 谓 PH 一 分 布 的 反问 题 ， 即 已 知 以 上 
马 氏 链 的 首 达 时 间 的 条 件 分 布 向 量 序列 {g;, > 1} ， 能 否 求 其 P 与 Pu ? 下面 给 出 肯定 
的 回答 : 

记 B(k,p) = (gr gs+1 ,gk+4p-1) 为 p xp 矩阵， 称 为 该 马 氏 链 首 达 时 间 7 的 条 件 
分 布 向 量 冠 阵 。 有 以 下 的 : 

定理 3.6.2 在 上 述 记号 下 ， 有 

1"。 vk>1,， 有 














gr = Pgp_1: (3.6.5) 
B(k.p)=P. BE— 1,p); (3.6.6) 
2” 若 rankB(0,p)=p， 则 
P = B(1,p)B- (0,p): (3.6.7) 
Po= (I— B(1.»)B- (0,p))e: (3.6.8) 
3"。 车 rankB(0.p)=p， 则 98 


g = B(1,p)B- 1(0,p)gr 1. (3.6.9) 


3.7 ” 首 达 目标 模型 与 其 它 模型 的 关系 


证 明 :1 ”由 3.6.2 即 得 3.6.5 及 3.6.6 ; 

2。 当 rankB(0,p) =p 时 ， 由 3.6.6 即 得 3.6.7 及 3.6.8 。 

3” 由 2” 即 得 。 

上 述 定 理 说 明 : 若 rankB(0,p) =p， 则 P,Po 可 由 B(1,p) 唯一 确定 ， 且 首 达 时 间 
的 条 件 分 布 向 量 序列 由 B(1,p) 唯一 确定 。 

问题 1 ， 当 rankB(0,p) =7?， 而 1<7<p 时， 请 有 兴趣 的 读者 作为 练习 研究 并 给 
出 其 答案 。 

在 物理 与 工程 技术 管理 中 往往 有 这 种 问题 ， 即 某 系统 的 内 部 参数 未 知 〈 例 如 P,Po 
未 知 ) ， 但 其 对 外 的 某 些 指标 是 可 以 观察 到 的 〈 例 如 r 的 观测 值 ) 。 如 何 由 能 观测 到 的 外 
部 参数 估计 其 内 部 参数 ? 这 是 有 意义 的 理论 与 应 用 问题 。 

问题 2 ， 如 何 用 B(X,p) 来 表示 g(^) ? 请 有 兴趣 的 读者 给 出 答案 。 

PH 分 布 有 如 下 的 一 些 性 质 : 

性 质 3.6.1 和 否 元 ,为 PH 分布, 则 元 十 To,Ti 信 T2, 克 4VT2 均 为 PH 分 布 。 

性 质 3.6.2 元,… ,7 为 PH 分 布 《为 dr.w.， 与 元 ,… ,7 独立 , 且 P(& =k)= 
pr,l1 <Ek<n, 则 : i 你 Te 有 为 PH 分 布 。 

性 质 3.6.3 设 7 为 PH 分 布 ，F 为 其 分 布 函 数 ， 对 于 7 < 1， 


oo 


> (1 7)r" -1F(®) 


为 PH 分 布 ， 其 中 Ft") 为 的 n 重 卷 积 。 

以 上 性 质 的 证 明 均 留 给 读者 作为 练习 。 

由 于 PH- 分 布 便于 上 机 计算 与 分 析 等 特点 ， 它 已 在 排队 系统 ， 制 造 系统 ， 通 信 
网 络 ， 计 算 机 网 络 等 领域 有 广泛 的 应 用 ， 


$ 3.7 首 达 目标 模型 与 其 它 模型 的 关系 


本 节 考 虑 定义 在 状态 空间 5 为 有 限 集 的 马 氏 链 {X,n > 0} 上 系统 的 总 报酬 (或 
某 个 性 能 指标 ) 的 甜 与 分 布 及 其 拉 氏 变换 问题 , 设 五 c 5 为 目标 集 ， 互 =S- 五 为 
系统 的 工作 集 ， 设 "(i) 是 定义 在 9 上 的 非 负 有 穷 值 函数 ， 7(i) 可 理解 为 系统 在 ; 状 
态 在 单位 时 段 的 报酬 (7(i) 亦 可 称 为 该 系统 的 某 个 性 能 指标 函数 )， 为 方便 且 不 失 一 
般 性 ， 当 ie 时， 规定 7(i)=0. 


今 : 





| min{n:n>0,X,€EH}, {fn:n>0,xX,e€H}zAD, 
7 二 


ooe， {n:n>0,X,€H}=0, 
TH TH 
Wo= > 7rX)99 Wi= r(x,). 
有 二 个 be 


于 是 ra 表示 首次 到 达 目 标 集 时 间 ， Wo 表示 从 0 时 刻 到 进入 目标 集 之 前 的 总 报酬 (或 性 
能 指标 ), 它 是 定义 于 {Xn > 0} 上 的 可 加 泛 函 ， 由 于 7(Xn) > 0(n > 0), 故 Wo,Wi 均 
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是 非 负 随机 变量 ， 记 


HA =EWE = 站 hk>1,ieH: 
F(t) =P(Wo <tXo0=i), t>0,ie FH:; 
$i(A) 3 edF(t), A>0,ieH,. 
0 
记 ?) = 内 =1 令 产 = 中 = 及 
Kk—1 
Rs tt 依 区 你 
1 二 0 
以 rW, AD 及 4( 和 ) 分 别 表示 分 量 为 中 ,Ap 及 bi() (ie 互 ) 的 列 向 量 . 则 有 如 下 定理 : 
定理 3.7.1 对 任意 有 > 1,4 满足 方程 组 


AD = TCD 十 了 PN， (3.7.1) 


其 中 卫 = (pij)##,ij EH. 
证 : 注意 到 当 Xo, XE 5 时 WS = 了 0 Ci 人 TI + WE, 然后 用 类 似 于 定理 3.6.3 
的 证 明 方法 即 可 得 (3.7.1). 
设 YY= (ywp,… ,WW)7 为 互 上 的 未 知 列 向量 ， 有 如 下 定理 : 
定理 3.7.2 若 互 为 瞬时 态 集 ， 则 Ap > 1) 是 下 列 方程 组 














Y=r) + PY (3.7.2) 

的 唯一 非 负 有 界 解 ， 且 
HL 一 》、 PY .rOD) (3.7.3) 

疙 三 身 


证 : 由 (3.7.1) 式 知 Ap) 是 (3.7.2) 的 一 个 非 负 有 界 解 ， 以 下 只 需 证 唯一 性 . 
设 V4 是 (3.7.2) 的 另 一 非 负 有 界 解 ， 即 


VOD 一 TO PV. 


由 上 式 及 (3.7.1) 式 ， 有 
VD 一 AN = P(V® 一 AGO). (3.7.4) 


重复 利用 (3.7.4), 有 
V(X) Es AL) P(V(D 4 ALL ES PV i HL) 这 PV EE HL)， 
因 H 为 瞬时 态 集 ， 故 V27 E 互 ， limn ~ pi = 01 即 PY) 一 0. 故 


VR) 7 AD = 刷 座 PY (VY AL) 二 0， 


及 一 DO 


3.7 ” 首 达 目标 模型 与 其 它 模型 的 关系 





所 以 
VOD 一 AD， 
且 Co 
(I-P)-!= >》 Pp™. 
挫 寺 人 0 
存在 ， 于 是 由 (3.7.1) 式 可 得 (3.7.3) 式 . 口 
推论 1 记 4 = maxi J, Il = maxi lri|, 则 当 p < 工时， 有 
es i 9 
记 
了 和 = (piy exp(—A7;)), 2,7 € 五 , 
bi(N) = > pij exp(—Ari), 
jEH 
b(A) =(51(N), (A ,by (NA))T. 
则 有 如 下 定理 : 


定理 3.7.3 对 入 > 0,%(A) 是 下 列 方程 组 
Y=bA+PAY (3.7.5) 


唯一 的 非 负 有 界 解 . 
证 : 先 证 $(^) 是 (3.7.5) 式 的 解 . 因 
Fi(t) =P(Wo < t|Xo = 


= pyPWi St—rilXi=))+ >》 pyP(r; <tX1=7). 


jeH jE€H 
故 
丽人 = 》 pailt— ri) + orPm <tX1 =7). (3.7.6) 
jEH jEH 
从 而 
$i(N) = > pi exp(—Mri)$j(N) + >, pij exp(—Ari) (i€EH). (3.7.7) 
jEH jE€H 
即 
$M) = b(A) 十 卫 A%(A). (3.7.8) 
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下 面 证 明 唯 一 性 ， 只 要 注意 到 : p(P、) < je 二 Pe” < 1, 表 用 类 似 于 定理 3.7.2 
的 唯一 性 证 明 过 程 ， 便 知 %(A) 是 (3.7.5) 式 唯 一 的 非 包 有 界 解 . 口 
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因为 0 < 页 (A) < 1, 显然 有 下 述 结果 : 
推论 对 入 >0. 有 














= 》 PXb(N). (3.7.9) 


首 达 目标 模型 不 仅 有 广泛 的 应 用 背景 ， 同 时 它 在 理论 上 是 最 重要 的 基本 模型 之 一 ， 
因为 其 它 许多 模型 均 可 化 为 该 模型 来 处 理 ， 下面 着 重 以 折扣 依赖 于 历史 模型 为 例 . 





马 氏 链 折扣 依赖 于 历史 的 (可 加 泛 函 ) 模型 


设 对 = {Xn,n > 0} 为 马 氏 链 ， 状 态 空间 为 9 = {1,2,… mj} 一 步 转 移 概 率 和 矩阵 为 
P= (pi)): 

令 7:5 一 卫 +, 7r(i) 表示 系统 在 i 状态 的 性 能 指标 ,折扣 因子 :5 一 [0,1), (i) 与 
状态 有 关 . 记 BP(i 和 王 ee BP()}, 其 中 B(i) > 0, Vie 5. 考虑 折扣 依赖 于 历史 的 可 加 性 
能 泛 郴 


ba 人 co 及 一 
Sl( TIax 二 >》 (exp{— OBOXDV) TK,), 
a 3 n=k re 
天 一 工 
mk 人 人 = B(E|Xo = nd) =70), re(d) = DD TC (rm(d), (3.7.10) 
i=0 
piy(k) = "(i)pi, bj E Sk>1, 
my = (ma(i),i€E $5)Y, rs = (ra(i),iE S)T, P(K) = (pi(k))ijes 
式 中 约定 [0 B(X1) =1. 
定理 3.7.4 Yk > 1,， ms 满足 
mx = rh + P(E)me. (3.7.11) 
证 : 类 似 于 定理 3.7.1 的 证 明 . 汪 


注意 到 当 8(i) < 1, Yie 5 时， 有 以 下 推论 : 
推论 mx 是 下 列 非 负 方程 
X=ri+PHX 


的 唯一 非 负 最 小 解 ， 且 _ 
2 Bk 口 (3.7.12) 


由 上 面 讨 ; 企 可 知 ， 只 要 已 知 m Bb 与 P's (pij). ). 可 由 ( 3.7.12) 式 逐 次 次 求 得 m1, Ti1, 
m2, YT2,° °° ,Nk, Pk, 

从 方程 (3.7.1) 和 (3.7.11) 可 以 看 出 ， 首 达 目标 模型 的 上 阶 窍 jw 与 折扣 依赖 于 历史 
模型 中 的 阶 矩 所 满足 的 方程 组 极为 相似 ， 目 然 要 问 : 对 于 给 定 的 马 氏 链 的 折扣 依赖 于 





练习 题 


历史 模型 的 &( > 1) 阶 矩 问题 ， 能 和 否 构造 一 马 氏 链 ， 使 其 首 达 目标 的 一 阶 抢 恰好 等 于 前 
者 的 大 阶 窍 ? 回答 是 肯定 的 . 

定理 3.7.5 对 于 由 (3.7.10) 式 给 出 的 折扣 依赖 于 历史 模型 的 阶 抢 向 量 mj(k > 1) 
必 可 构造 一 相应 的 首 达 目标 模型 ， 使 得 该 模型 的 一 阶 矩 向 量 恰好 等 于 mx. 

证 : 构造 相应 的 首 达 目标 模型 ， 设 新 马 氏 链 为 X = {Xi.n > 0}, 其 状态 空间 为 
5 = 5U {6}, 一 步 转移 概率 矩阵 为 PUB) = (Pj(k)), i,j E 5, 指标 函数 为 六 :5 一 卫 + ,其 
中 

















BY (i)pij, jE€S, 
1— > By(k), ies.j=56, 
Dijy (Kk) 三 JES 
1, i 二 7=56, 
0， i=6,j€S, 
Tk(2), ZES, i 
计 ( 让 二 (3.7.13) 
0， 1 二 6. 
Ts = inf{n:n> 0, 成 = 6}, 
~ Te ~ ~ ~ 
€0(K) = mR) 让 (人 = 已 (co Ko = 六 i€S, 
?二 0 


ji(k) = (p(s, k), 2 € 5). 
式 中 ZT 表示 首 达 6 的 时 间 ， jii(k) 表示 首 达 目标 一 阶 矩 向 量 . 因 %Bs(k) > 0, Vice3 且 
Bss(k) 二 1 ,从 而 5 与 5 对 苇 = {XX,n > 0} 而 言 分 别 是 瞬时 态 集 与 吸收 态 . 不 难 验证 ， 
1(k) = ry + PERRI(E), 
且 是 方程 组 义 =r; 十 P(Xk)X 的 唯一 非 负 最 小 解 . 故 


hi(k) 二 DO， 


这 说 明 由 (3.7.10) 式 定义 的 折扣 依赖 于 历史 模型 的 阶 符 (k > 1 任意 固定 ) 与 由 
(3.7.13) 式 定义 的 首 达 目标 模型 的 一 阶 矩 相等 . 

读者 不 难看 出 ， 在 $ 3.6 中 讨论 的 达到 次 数 的 矩 问 题 及 其 它 许多 问题 亦 可 化 为 首 达 
目标 模型 的 一 阶 秆 问题 . 








练习 题 


3.1 设 马 氏 链 {Xi,,n > 0},5S = {1,2,3},Xo=3,T= min{n :n> 1,X, = 1} 的 转移 矩阵 
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问 别 为 : 
) 1 1 Oe 
1 0 0 #3 20 全 
Pi=| 二 0 | mm=| 二 0 Po 
0 3 3 0 3 3 3 30 


1. 对 Pi, 求 B(X2), BE(X2|X1), E(X3|X2), Ti(2) = P(X2 = i),i€S; 
2. 对 Po, 求 P(T=kXo=3),l1 <k<3 及 E(T 人 4|Xo = 3); 
3. 对 P, 求 1 的 分 布 律 及 ETii. 


证 明 





定义 转移 概率 母 函数 $ij(z) = 开工 o2i 22， < 1,4,7 € 5 母 函 数 矩 阵 $B(z) = 
(gi;(z)). 证 明 


B(z)= (I—-zP) 1=I+zP+zP? +...+2*P"+.... 
3.4 一 个 国家 在 稳定 经 济 条 件 下 它 的 出 口 商品 能 够 用 三 状态 的 马 氏 链 描 述 如 下 : 状态 空 


间 5S = {+1,0, 一 1}); 十 1: 今年 比 去 年 增长 > 5%; 0: 波动 低 于 5%; -1: 今年 比 去 年 减 
少 > 5%. 由 以 往 的 统计 数据 求 得 转移 矩阵 为 





+1 0 =- 
+1 | 08 02 0 
0 | 0.35 0.30 0.35 
-1 | 0 0.40 0.60 
104 
试 求 每 个 状态 的 平均 返回 时 间 ， 并 比较 在 稳定 经 济 条 件 下 增长 趋势 与 减少 趋势 的 期 
望 长 度 . 


练习 题 


3.5 水 库 供 水 按 其 水 位 分 为 下 列 5 个 状态 : “1 ” -危险 水 平 : “2” 一 缺 水 “3” 
- 刚 够 : “4”- 较 好 “5” 一 充裕 5 = {1,2,3,4,5}, 由 已 有 数据 求 得 相 邻 时 
间 周 期 的 转移 先 阵 为 

0.1 0.1 0.3 0.5 0 
0.3 0.2 0.2 0.2 0.1 
P= | 0.1 0.2 0.4 0.2 0.1 
0 0.1 0.2 0.4 0.3 
0 0.1 0.1 0.4 0.4 
试 求 出 现 危 险 水 平 的 平均 时 间 长 度 ( 即 求 hai = p41). 

3.6 在 $3.1 中 例 3(a) 离散 时 间 排 队 模 型 中 ， 十 1 时 刻 等 待 服务 的 顾客 数 X41 = 
(Xn 一 1)+ 十 &y, 其 中 {6&,n > 0} 独立 同 分 布 , 且 P(&, = = ar,k EN. 6 表示 第 
周期 到 达 的 顾客 数 ， y+ = maz(0,y). 试 证 明 当 ?okax < 1 时 ， 存 在 平稳 分 布 ， 
并 求 平衡 时 等 竺 顾客 的 平均 队长 . 

3.7 设 马 氏 链 {Xs.n > 0},5 = {1,2,3},P 如 下 


0.5 0.4 0.1 
P= | 0.3 0.4 0.3 





0.2 0.3 0.5 


1. 求 平稳 分 布 不 二 (x1, 72, 73) 及 lim ,x Ps 
2. 当初 始 分 布 5(0) 是 怎样 分 布 时 ， 此 马 氏 链 是 平稳 序列 ? 并 求 BX 及 DX,. 











3.8 设 
| 
p 4 4 
S={1,2,3}, P=|0 3 3§|, 
0 0 1 
求 
1. Ti 的 分 布 律 及 EBT;: 
2. fiili = 1;2.3); 


3 Nn O00 时 2 EY 
3.9 考虑 下 列 随机 游 动 
pii+1=p, 0<p<l1, 
pii-1=4=1 105 1 一 12... .7 一 1 


200 二 Prr 二 二 
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X， 表示 n 时 刻 质 点 的 位 置 ， 当 =1,7= 3 时， 求 : 
dl) = P{X, =rUZ =0 存在 一 n>1|Xo=k}, 0<k<r. 
3.10 一 马 氏 链 {Xn,n > 0} 的 5 = {0, 1, 2,.…. ,N}, 转移 概率 为 


Mi, j 三 7 一 二 

入 7 三 2 十 1， Re 
pij = l IES 

1 一 入 一 Hi， 了 7 三 有 

0， 1 一 计 > 1 


且 hp=xX=Hh=Av=00<Hm<1l10<XN<1l1<i<N-1Xo=8 求 
1. P(X = 0, 某 个 n> 0|Xo = 及 P(X = NV, 某 个 n > 0|Xo = 
2. BTio 及 EDN. 
3.11 设 马 氏 链 {Xn,n > 0} 的 $= {0,1,2,… , 信 }, 转 移 概 率 为 pij = CT!(1-xi) 六 -i 0 < 
ij <N 其 中 t= 与 ea (注意 “0” 与“N ”状态 是 吸收 状态 ). 
1. 证 明 {e->*X*,n > 0} 是 款 ， 即 





再 (e 一 24"+1 [Xo, X1, i ,了 Xn) = 6 nC 了 


2. 证 明 
PED |b oe 
3.12 设 j 为 非常 返 状态 ， 证 明 对 任意 ie 5, 有 


(2) es fii 


二 <. 
re 


3.13 设 { ,nm > 0] 是 独立 同 分 布 且 P(X; = = ax > 0,k EoD> ar =1 如 
Xn > Imax(X1X2 ,Xn-1), (其 中 Xo = 一 %% ), 则 说 wn 时 刻 创 一 新 记录 ， 且 称 X， 
为 记录 值 . 记 BR 为 第 ， 回 的 纪录 人 试 说 明 i > 1} 是 一 马 氏 链 并 求 其 转移 概 
玉 . 
3.14 设 有 两 串 独 立 的 贝 努 里 ( Bernoulli ) 试验 序列 Xi1, Xs,… 及 姑 , 卫 …, 它们 成 功 的 
es Pi 与 p2, 好 P(X;=1)=1- P(X;=0)=p,P(Y=1)=1-P(Y= 
) = Da. {Xn.n>1}5{Y.n> 独立 . 为 决定 是 否 zi > ps 或 ps > pi, 我 们 利用 
选取 某 个 正 整数 M 使 得 





或 者 Xi+ XTX OOF + + + ) = M, 
或 者 让 1 十 站 ?十 …: 十 Xn ( 矶 十 到 十 :十 芒 ) 三 M. 





练习 题 


若 试验 结果 是 前 一 情况 发 生 ， 则 判定 pz > pz:; 若是 后 一 情况 发 生 ， 则 判定 pz > pi. 
记 








N=minfn:n>1, 针 十 六 3 十 一 十 一 (了 十 癌 十 … 十 总 ) = 二 土 M}. 
试 证 明 
1. 在 pi > ps 条 件 下 ， 经 试验 误 判 p > pi 的 概率 为 于 rr, 其 中 和 = 和 2); 
2 
M(AM-1 
EN = ( ) 


(2 一 pa +1) 
3.15 设 非 负 减 序列 l=b>0 > >..., 令 Bn = bn (bo ++ Di 二 十 Dn)!l, on 





E(B; Bit), jo 
pi = 4 于 j=it+l 
0, 其 它 . 
1. 证 mo = ox; 
2. 该 马 氏 链 是 非常 返 链 ， 当 且 仅 当 
c 1 
-一 区 co， 
n=0 On 


3.16 {XX,,n > 0} 为 离散 分 支 过 程 ( 见 $ 3.1.2 例 44. 令 j= Bt,o? = Dé;. 
1. 说 明 “ 0 ”状态 是 吸收 态 ， 而 其 它 状态 是 非常 返 态 ; 
2. 证 明 


2 


o2pm-1lE 1l, jz1, 
ob eb / 0， 从 天 1 
no”, 万 三 于 


3.17 设 fm > 0 是 M.C. 证 : Yn>1iiE€E5,BC5S50<k<n-1l, 有 
P(Xnti= jlXr E Br, 0<k<n-1, X=i)= PX = jx = i). 

3.18 设 {Yn>0}iid PY =D=p>0Pp =-D=y=1-p>0 令 和 = 巧 = 
i XN En Eminfn:n> 0, Xo = iXn = 0 或 X = 0}, 其 中 5 为 正 
整数 ，0 < ;< 0b. 

1. 当 i=1,5=3 时 , 求 P(T=KXo=1), KEN 及 P(Xr, = 3|X0=1); 
2. 当 ; = 29=5 时 , 求 P( 胞 = 有 REo=2 he 及 P(Xr, = 5|Xo=2). 

3.19 设 {Yn > 0} iid, P(Y, = D =p>0 P(Y, = -1)=g=1-p>0. 令 了 
Yo = 7, XN = Dt Yi, n>1, To min{n : n > 0,Xo = 0,X, = Ek}, Xh = 
XTi+tn, Ts = min{n :n> 0,X6=1,7X = 有 2}. 

1. 当 p>g 时 , 证 {Xn.n>0} 与 {X%,n>0} 具 有 相同 的 P= (pij); 
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2. 证 {To1 = 外 与 {3 = 3] 独立 ，Toi 与 对 iid. 
3. 试用 母 函 数 方法 求 To1 的 分 布 律 ， P(Tbl = +cc) =?: 
4. 当 p-w>0 时 ， 证明 E701 < =. 


3.20 设 {Xi,n > 0} 为 M.C. ， 状 态 空间 9 = {1,2,3},So = {2,3} 。 一 步 转移 概率 矩阵 
P= (py) 如 Ff: pll = 5/8,p12 = 2/8,p13 = 1/8,p21 = 2/6,p22 = 3/6, pos = 1/6, pal = 
3/4,p32 = 1/4,p33 = 0, Xo=1, 令 : T=minfn:n>0,X ESon=minfn:n> 
TI, Xn = 1 = min{fn :n> mi Kn E Soh Tm = min{fn:n> T,Xn = 1),n> 
2,N(t) = D1 Tr, <t): 

1. 试问 im 一 sx 28 与 lim x (Xn|Xo = 1) 是 否 存 在 ? 若 存 在 ， 求 之 ; 
2. 下 与 元 关于 {Xn,n > 0 是 否 是 停 时 ? 说明 理由， 
3. 求 P(T = A),k EN, BET, Br 
4. 求 P(N(3) = 1), P(N(4) = 2). 


3.21 设 {Xi,n > 0} 为 不 可 约 的 M.C. ， 状 态 空间 9 = {1,2,3} 。 PP = (pij) 为 一 步 转 移 
概率 矩阵 ， 记 : T= min{n:n>0,X,=3),7= min{n:n>0,X,=1}). 若 已 知 
ax(i) = E(TS|Xo0),iE {1,2},1 <Ehk<3,0(i) = E(r|Xo),ie {2,3},1<k<3. 

试 讨论 在 什么 条 件 下 能 够 用 a (i),ieE {1,2},1 <h<3 及 bi(i),ieE {2,3),1<k<3 

表示 了 = (pij),(i,7j €E S) ?给 出 适当 的 条 件 及 它 的 具体 表示 . 
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第 四 章 ”离散 著 引 论 


蒜 (Martingale) 论 目 前 已 成 为 研究 概率 论 理论 及 应 用 概率 论 和 其 它 随 机 过 程 的 有 力 
工具 . 在 统计 ， 序 贯 决 策 ， 最 优 控 制 ， 随 机 微分 方程 等 方面 均 得 到 了 广泛 应 用 . 对 论 的 发 
展 与 现今 的 竞争 社会 是 分 不 开 的 ， 有 奖 彩 票 ， 保 险 ， 投 资 建设 等 均 与 壮 论 有 关 . 





$ 4.1 定义 与 例子 


定义 过 程 {Xn > 0} 是 拷 , 如 果 vn >0, 有 
1° ElX,|< x, 
2° (Xnti|Xo, Xi, Xn) = Xn as (几乎 处 处 )， 
加 的 背景 来 源 于 公平 赌博 . 上 式 表 明 ， 如 第 n 次 赌 后 资金 为 X,, 则 第 n 十 1 赌博 后 
的 平均 资金 恰 等 于 X,, 即 每 次 赌博 胜 负 机 会 均等 . 
有 时 {X,n > 0} 不 能 直接 观察 ， 而 只 能 观察 另 一 过 程 {7,,n > 0}. 故我 们 作 如 下 定 














义 : 
定义 设 有 二 过 程 {Xn,n > 0} 及 {六 ,n>0}, 称 {Xi,n> 0 关于 {了 ,n>0 是 

鞭 ， 如 果 

1” ElX,|< co， 

2° BE(Xnri|o, ,1 ) = Xn as.( 几 乎 处 处 ) 

解释 : (i) 因为 忆 = B(Xnti| ,… , 访 ) 是 ( 久 , 六 ,… ,了 ) 的 函数 , 故 有 EE(X, | 六 ， 
Yi ,hh) = Kn. (1) EX = E[E(Xn+1|Yo,.. I)] = EX, = EXo. 这 说 明 蒜 
{Xn,n > 0} 在 任何 时 刻 的 期 站 值 均 相 等 . 

下 面 介 绍 一 些 款 的 典型 例子 . 

例 1 独立 同 分 布 随机 变量 之 和 

设 w= 0,{ 瑟 ,n> 1} 独立 同 分 布 ，EY, = 0,B|Y,| < x,Xo=0,X, = iF, 则 
{Xn,n > 0} 关于 { 隔 ,n > 0} 是 蒜 . 

证 : 因为 














EIlXn|=B <%, 





D4 
# 二 中 


BE(XntilYo, Vi, ,Ti) =B(Xn + Vr, ,Yh) 














=E(X, |Yo,... ,7 ) + EB(Y ti|Yo, ,Yh) = Xn 





例 2 和 的 方 关 i 
设 Yo = 0, {Yh ,nn > 1} 独立 同 分 布 ， EY,, = 0. EY? 0o?, Xo 0, XX, (Bi YY) ms 
ng?, 则 {Xn,n > 0} 关于 {Yn > 0} 是 鞭 . 
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ElX, | <E 十 ma2 














二 及 (> ?no’ (>， Yi ) 
ks ke 


=E (> Y2 十 | 十 na2 = 2na2 < sc; 


k=1 izj 


E(Xnt1|Yo,..., Y) 
=B|{( mt Yn) - (n+ 1)o ?Ho | 
=B|[{ Wt 2 D+ 人 人 - (n+1)o ?ho,. 全 
=E[Y2.1|Yo,.…. .Y,] 2B( ts Db. ) + BE(Xn|Yo,. ,Yi) — 0 


DD A 2E( (Yat1|Yo,: 9 (5 ) 十 Xn 一 o? 
Kk=1 
=o2 二 0 十 Xu 一 ac2=X， 口 
由 上 两 例 知 , 由 独立 同 分 布 随机 变量 的 和 或 者 和 的 方差 所 构成 的 序列 都 可 以 构造 著 ， 
那么 更 一 般 的 结论 呢 ? 
例 3 一 般 和 
设 {于 ,nn > 0} 为 一 随机 序列 ， 2Z; = 0i( 卫 号 ).9 为 一 般 函 数 . 函数 f 满足 
El|f(2)| < oc. axp (Yo ,Vk1) (kK > 0) 为 开 元 有 界 实 函 数 ， 即 


|ok(yo YE-1)| < 4 YW ,YE1: 


约定 : 
ao(Y-1) = a0, BIf(Zo)|Y-1] = BIf(Z0)]. 


心 


Xn = {F(Z1) — ELFZE)NYo, Yi Yi]} :ar (Yo , Yh), 


可 以 验证 ， {Xn,n > 0} 关于 {7,,n > 0} 是 靳 . 
证 : (i) 


ElX,| 入》 El{f(21) — EIf(Zi) Yo ,Ya]}an(Yo,.. , Yi) 
大 二 位 
110 


< Ar{BIFZE)N] + B{EINF(ZN Yo ,Fe < > 24r BIf(Z1)| < < 
天 三 站 天 三 站 


4.1 ”定义 与 例子 
人 的 ) 记 
Bx = {f(2x) — BLOZ) NY , Yea]}ar (Yo, ,Yi). 
则 
E(B |Yo, 1) =a (Yoo, 1) {BF(Z)|Yo,.:: ,Yh_1] 
— B(BIf(Zi)|Yo.. Yo, ,1) 
=ay (Yo,.… ,V1) {BIf(Z) | ,Yr_1] BE[f(21)|Yo, 2 , Yr-1]} = 
上 式 推导 中 用 到 了 ax (Yo,… , 穆 -1) 是 Ww,… , 阮 -1 的 函数 ， B[f (Zi)|Yo,Y,… , 装 -1] 


也 是 于,… ,了 -1 的 函数 的 事实 ， 由 于 B(Bi | 了 W,… ,于 -1) = 0, 且 XX。 是 了 W,… ,了 的 
函数 ， 故 


BE(Xut1|Yo,. ,Y) BE(Xn|Yo,.*. ,i) + E(Bari|Yo,. ,Y,) i 口 





由 此 可 知 ， 由 一 个 一 般 的 随机 序列 也 可 以 构造 出 蒜 来 . 这 是 一 个 有 意义 的 结论. 下 
面 介 绍 几 个 具有 特殊 实用 价值 的 软 ， 

例 4 由 马 氏 链 导 出 的 对 

设 {六 ,n > 0} 是 马 氏 链 (其 状态 空间 为 5), 具有 转移 概率 矩阵 P= (pij), f 是 PP 的 
有 界 右 正则 序列 (调和 函数 ), 即 f(i) > 0, 且 


j1 人 =2Dr10)， MGOI<M ies. 


jES 
令 Xn = f(Y¥,). 则 {Xn > 0} 关于 {Yn,n > 0} 是 艾 . 
证 : 因为 
ElX| < %, 
又 由 于 


BE(XntilYo, ,1 ) 三 再 卫生 | 瑟 ,页 ) = 如 AH) 丈 ) (由 马 氏 性 得 到 ) 
=》 j0)P( 了 + 二 了 | 到) -== DF)py,y = f(Y,) = 
J 了 ES JES 
因此 {Xi,n > 0} 关于 {了 ,n> 0} 是 著 . 口 
例 5 由 转移 概率 特征 向 量 导 出 的 拷 
右 特征 向 量 ， 如 果 对 某 个 X( 称 和 为 特征 值 ) 有 
Mf(2) = > Fh), Vies, 
JES 


且 Bf()| < x, Yn 令 对, = 和 "fh), 则 {Xn,n > 0} 关于 { 玉 ,n> 0 是 著 . 
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证 : 因为 
EIXn|=BEIA .ff(Y,)| = "Ef,)| < cc， 
BE(Xn+1|Yo, Yi,: ee Wb 1f(Y, n+1 )|Yo, Yi, 2 
= es nn 二 1 J 


一 入” 和“ 1 >》 [7( “DY, e A f(s: 
了 ES 


更 一 般 地 ， 设 {7,,n > 0} 是 一 离散 时 间 马 氏 过 程 ， 具 有 转移 分 布 函 数 
Flylz) = P{Ynt1 < ylYh = 2}. 


= Jade 内 


则 {X= 和 "f(a).n >0} 是 一 个 款 ， 

例 4 和 例 5 将 上 一 章 讨 论 的 马 氏 链 与 本 章 的 款 这 两 个 重要 的 随机 过 程 有 机 地 联系 起 
来 了 ， 在 实际 中 这 样 的 应 用 非常 广泛 . 

例 6 由 分 支 过 程 构成 的 团 

设 {Yh,n > 0} 表示 一 分 支 过 程 , 并 设 生成 后 代 分 布 的 均值 为 < x, 则 Xn = mY 
关于 {Y,. n> 0} 是 堵 . 

证 : 设 3 )(j) 为 第 代 的 第 ;个 个 体 产生 的 个 体 的 数目 ， 3 (让 ,i = 1,2,…, 独 
立 同 分 布 ，B{20 (i)} = m, 并 设 丈 为 第 代 的 个 体 数 . 则 














Yt = 20(1) + 2(2) + + ZF,). 
显然 


E(YarilY) =B{2)(1) + + ZY )|Y,)} 
=B{2(D) + + ZF) = YB(20)(1)) = mY 


所 以 ，m 是 函数 fy) = y 的 特征 值 . 根据 上 例 的 结论 ， 容 易 导 出 ,= mr-"Y, 关于 
{Yh,n 之 0} 是 拷 . 口 
例 7 Wald 拷 
设 了 w= 0, 妨 , 斑 ,… ,本 ,… 独立 同 分 布 ， 且 存在 一 有 限 矩 生成 函数 $( 和 ) = Ble**]， 
对 入 关 0, 令 Xo = 1,X, = $7"(A)exp[ 和 (于 十 … 十 六 那么，{Xo,n > 0} 关 于 {Y,,n > 0} 
是 缺 ， 112 
证 : 首先 证 明 函 数 f(y) = e*Y 是 部 分 和 Su = 矶 十 丈 二 十 丈 马 氏 过 程 的 特征 函 
数 ， 对 应 的 特征 值 是 4(A). 


41 ”定义 与 例子 


事实 上 , 若 G 是 了 , 的 分 布 函数 ， 则 有 P{Sw+1 < YS% = 2} = G(y 一?), 因 而 有 
dGU — 2) = e*” je dG(C) = eV(A). 
由 例 5 推广 的 结论 知 ， 当 


Xn =$ "(Nf ) = 8 "(MN) exp[ASn] 














时 {Xi,n > 0} 关于 {5%,n > 0} 是 款 ， 即 {X,n > 0} 关 于 {了 ,n> 0} 是 鞍 . 
在 上 例 中 ， 假设 Yi,Y2,: vy PS 独立 同 分 布 ， 且 服 从 JV(0,a2)， 则 


40) =B(exp(AY1)) = exp(3N207), 





X =exp{A( 玉 十 :… 十 六 ) 一 > 


若 令 \ = 长, 得 到 
np 





省 
Xn =exp{ 久 (六 十 入 十 … 十 芒 ) 


则 {Xn,n > 1} 关于 {35,n > 1} 是 著 . 
这 是 一 个 非常 有 用 的 结论 ， 因 为 正 态 分 布 是 我 们 经 常 遇 到 也 长 于 研究 的 一 种 分 布 . 
例 8 似 然 比 构成 的 款 
设 巧 ,五 , 丈 …， 是 独立 同 分 布 随 机 变量 序列 ， fo 和 fi 是 概率 密度 函数 ， 令 
大 二 fo0) (YD) f(s) Ee | 
folYo) -folF) fo) 一 
假设 Vy,，fo(y) > 0. 当 区 的 概率 密度 函数 为 fo 时 ， 则 {X%,n > 0} 关于 {了 ,n> 中 是 
租 


上 


202 


证 : 因为 
到 这 中 芋 二 [ 守 于 | ee 
” 所 (30) fo(¥,) 
且 
Ee f(t1) I 万 (到 +1) 
吾 ( 和 12 ,Yh ) =B Xn wh es XnE folFit1) ， 
由 于 











| /fi 
fo( Yr1) foly) 


因此 {X,n > 0} 关于 {了 ,nm > 0} 是 拷 . 
在 上 例 中 ， 设 有 i 是 正 态 概 率 密 度 ， 均 值 为 0, 方差 为 o?; fi 也 是 一 正 态 概率 密度 ， 
均值 为 /, 方差 为 ">, 则 


fi(y) =eqp{ 泡 一 和 | 
foly) 202]13/ 


2 
Xn -em1 F(T FY 十.…+ Y) A 上 
oa? 


holyay= { fly dy = 1 
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由 此 可 得 出 与 例 7 结尾 相同 的 结论 . 
例 9 Doob 著 过 程 
设 了 ,二 ,… , 互 ,… 是 一 随机 序列 ， 有 一 随机 变量 已 ,召开 | < x, 令 


Xn = E(X|Y,.. , Yn ), 


则 {Xn, n> 0} 是 关于 {Yrs > 0} 的 款 ， 并 称 之 为 Doob 过 程 . 
证 : 因为 


EIXn|= E{|E(X|Yo,..: ,Yn)|} < E{E(|X||Y, Yi, ,Yn)} = BIX|< se， 














BXntilYo. ,Y1) = B{B(X|Yo Yar) Yo ,} = EB(X|Yo,. ,Y) = X. 


这 个 例子 很 “奇特 "， 以 一 系列 任意 随机 变量 为 条 件 的 条 件数 学 期 望 构成 蒜 ， 
例 10 随机 Radon-Nikodym 导数 构成 的 款 
设 2F~UVI0.4], 即 2 是 [0,1] 上 均匀 分 布 . 令 区 = ho 而 1 >zc st 其 中 大 满 


a ) 
k Ak 十 1 
m2 
即 
=mex { 亩 : 站 2 k=0.12..}. 


设 f 是 [0.1] 上 的 有 限 函 数 ， 令 
Xn = JAY 十 2 ) Ea f(¥,)}, 


则 {Xn > 0} 关于 {VY,,n > 0} 是 区 . 
证 : 首先 注意 到 ， 在 Yo, Yi1,: OS jn 条 件 下 ， Z 服从 [¥, Yh, ee 2 上 的 均匀 分 布 
(7 < 2 < 也 ++2-"), 且 并 ,11 以 相等 的 概率 等 于 六 或 等 于 也 + 2-("+1, 于 是 有 


E(Xnt1l Yo ,Yh) =2°+1B(f (Yh + 2 1)) 一 有 瑟瑟 ,瑟瑟 )] 





SA 人 [二 2-o+D) ~ f(Y,) 





2 0 0 











三 2 {f(Y, 二 272) 3 f (Yn)} = 





以 上 列举 了 十 个 睹 的 例子 ， 许 多 时 候 用 缺 可 秆 解决 原来 不 易 解决 的 问题 但 关键 是 
如 何 构 造 出 蔷 来 . 


4.2 上 蒜 (下 蒜 ) 及 分 解 定理 


$ 4.2 上 蒜 (下 拷 ) 及 分 解 定 理 


定义 设 {X,n > 0} 与 {五 ,n> 0} 是 随机 过 程 ， 称 {X，,n > 0} 关于 {Y,,n > 0} 
是 一 个 上 款 , 如 果 
1° E(X;)>—~», 其 中 z= min(z,0); 
2 BE(Xnt1|Yo, Yi, ,Fh ) < Xn; 
3” XX 是 广 , 卫 ,… ,六 的 函数 . 
定义 设 {Xs,n > 0} 与 {了 ,n> 0} 是 随机 过 程 ， 称 {X,,n > 0} 关于 {Y,,n > 0} 
是 一 个 下 蒜 , 如 果 
1° E(X+) < ,其 中 z+ = maz(z,)0); 
2° BE(Xuri|Yo Yi ,Yh) > Xn; 
3” XX, 是 37, 六,… ,了 的 函数 . 口 
注意 ， 若 {Xn,n> 0} 关 于 {Yn,n>0} 是 上 拷 今 {-Xn.n>0} 关 于 {hw,n>00 是 
下 逻 . 
上 (下 ) 奥 可 用 不 公平 赌博 来 解释 . 
例 1 设 { 了 mn > 0} 是 马 氏 链 ，P = (pij), f 是 了 的 有 界 右 超 正则 函数 ， 即 
Dpyf) < FE DSM. 
jES 
车 令 X= HZ 则 {Xun > 0} 关于 {Y,,n > 中 是 上 识 . 
证 : 按 定义 验证 ， 显然 1”，3” 成 立 ， 只 需 证 明 2” 成 立即 可 . 
我 们 有 


E(Xnti|Yo Yi ,Ti) = BE(F(Y4)|Y,) = D> fpy,y < f(¥,) = Xn. 
JE5S 
为 后 面 讲述 方便 ， 先 介绍 一 下 Jensen 不 等 式 . 
设 p(x) 为 凸 函数 ， 即 Yzi,z2E R,0<a<1l, 有 


























ag(z1) 十 (一 ca)gzo) > Glari tt (1— Qo)r,). 


将 其 推广 ， 设 zi(i= 1,2,…: ,mm)E RV0<a;< 1 3 = 则 


mm mm 


> oii) > (Doi), 
采油 i=1 


因此 
E(G(X)) > p(BE(X)). 


故 ， 当 # 是 是 函数 时 ， 有 115 
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引 理 1 如 {Xn,n > 0} 关 于 {了 ,n> 0} 是 持 ，#$ 是 凸 函数 , 上 且 Ym， EB($(Xn)t) < cc， 


则 {8(X4),n > 0} 是 关于 {,n > 0} 的 一 个 下 载 ， 品 
推论 : 如 { > 中 关于 { > 0) 是 著 ，EB(X5h) < x, 则 {Xnl,n> 叶 与 

{Xa,n 之 0} 关于 {7h,n > 0} 是 下 萄 . 品 
上 (下 ) 著 有 以 下 基本 性 质 : 


1” 如 {X,n > 0} 是 关于 {六 ,n> 0} 的 (上) 拷 ， 则 
E(Xnrx|Yo, Yi ,Yn)(<)= Xn, vk>0. (4.2.1) 


证 : 用 数学 归纳 法 证 之 . 仅 证 上 著 时 的 情形 ， 当 为 著 时 , 将 “<” 改 成 “二 ” 即 可 . 

当 = 工时， 由 定义 ， (4.2.1) 式 成 立 . 

设 (Xn44 Yo, 了 H,… ,了 ) < Xn 成立， 要 证 明 BE(Xiyx4i|, 于,… , 识 ) < 也 成 
立 ， 因为 





BE(Xntrti|Yo, Yi ,Yh) =B{B(Xnrrt1|Yo, Yi,* Yuta)|Yo, ,Yn} 


<E(Xn+x|Yo, i, ET pa) < Xn, 


因此 对 所 及 > 0, (4.2,1) 式 成 立 . 口 
2" 若 {Zm > 叶 是 (上 ) 蒜 ， 则 对 0< <w ,有 


EB(Xn)(<) = EB(Xr)(<) = EB(Xo). 
证 : 利用 (4.2.1) 有 EB{Xi|Yo,… ,了 }(<) = Xi, 故 
E(Xn) = E{E[Xn |Yo,: ,Yn]}(<) = BE(X:). 


类 似 地 可 证 EB(X)(<) = B(Xo). 口 
3” 如 {Xn > 0} 关 于 {了 ,n> 0} 是 (上) 拷 ，g 是 关于 巧 ,五 ,的 ( 非 负 ) 
函数 ， 则 
Ef{g(Yo, Yi, Y,) | 瑟瑟 ,Pi)}(<) g(Yo,¥, 0 rn Xn vk > 0. 


证 : 因为 g 是 关于 瑟瑟 ,六 的 ( 非 负 ) 函数 ， 因 此 


E(g(Yo, Yi ,Th ) Xntr |Yo, Fi, ,Y) =g(Yo,¥1,- ,Yh) ' E(Xn+r|Yo, Yi ,Yh) 
(<) =g(Yo, ¥1,*- se A 口 


上 一 节 讨 论 了 许多 著 的 例子 ， 在 实际 中 常常 把 上 拷 和 下 著 分 解 成 喜来 处 理 . 

对 于 上 葡 和 下 寺 ， 有 一 分 解 定理 ， 它 是 巩 论 出 的 基本 定理 之 一 

定理 4.2.1 对 于 任意 一 个 {X,,n >] 二 关于 { 区 >] 的 下 圾 , 必 存 在 过 程 {M,,n > 
1} 与 {2,,n > 1}, 使 得 


4.2 上 蒜 (下 蒜 ) 及 分 解 定理 


1” {Mn,n>1} 关 于 {了 ,n> 1} 是 殷 ; 
2” 及 是 二 … ,了 -1 的 函数 (n>32), 且 21=0,2n < Znt1, BZn < 十 Sci 
3° X= M+2Z,(n> 1). 
且 上 述 分 解 是 唯一 的 . 
证 : 先 证 存在 性 . 令 21 = 0,Mo = Xo, 及 


n 
Ah =Xn 一 DE(Xx — Xx , Yi-1), n>1, 
和 


n 
Zn =Xn — M,, = DE(Xx 7 X11|Y, a ,Yi_1), 7 > 2. 
vy 


因为 {Xn,n > 1} 关于 {1,n > 1} 是 下 著 ， 因 此 
EB(XE|Y Ti) > Xr, BE(Xri|Yi, Ye) = Xl 


进而 有 
BE(Xi — Xr-1|Y, ,Yr1) > 0. 














因此 Zn 非 负 且 单 调 非 降 ， 且 Zn 是 Ty ,Yn-1 的 函数 . 同时 由 Zn 的 定义 有 








ElZ,| < EIX,|+ ElXi| < 十 sc 
另外 


BE(M,|Y,..: ,Yn—1) 


-of bE | 


=B(Xa|Y, ,Yi ) — DB (BX — Xe Vn) 1) 
B= 


Xn — DE(Xy — Xi-i|Y, ,Yl) 
1 








=B(Xa Ye ,1) — YB(Xi — Xn-i|Y, ,YL1) 





k=1 
n—1l 
=BE(Xu Yn Ye 1)— DE(Xy = Kil Yi) = BXy — Xai Ys) 
k=1 
n—l 
=Xn_1 — > BE(Xi — Xri|Y, 下 -= 
R= 


又 
EIM,|= EIX, ~ ZI BIX,|+ BIZ,| < x. 





因此 {Msn > 1} 关于 tn > 1} 是 著 ， 村 . Xn 一 Mi, 十 Zn. 故 存在 性 得 证 . 
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下 面 证 唯一 性 . 设 男 一 分 解 M;, 2 满足 上 面 定理 要 求 ， 即 
Xn = Mi +2n, n>1, 21=0, Mi = Xo = 

则 

Mi 十 Zn 0 Zh = Ris 
令 A = Mi 一 MM’ = 24-2Zi. 因为 {Mn,n>1} 和 {Mi/,n > 1} 均 是 关于 {7,,n>1} 的 
蔷 ， 因 此 {A,n > 1} 也 是 关于 {了 ,n> 1} 的 蒜 ， 所 以 有 

吾 (Au| 五 ,…: | An-1. 
又 因为 Zn, 24 是 关于 i, A 的 函数 . 因此 An 也 是 关于 i, Ye 的 函数 ， 攻 区 


是 
E(An|Yi,: a , Yn-1) 一 A 


进而 
A Ai 人 Al 21 = 人 二 




















四 二 2', M,, 三 M!. 


由 本 定理 可 知 ， 一 个 下 拷 总 可 分 解 为 一 个 著 与 一 增 过 程 之 和 |. 

推论 : 若 {X,,n > 1} 关 于 {7,n > 1} 是 上 著 ， 则 可 分 解 为 X= Mi 一 2 使 得 
1 {Ma,n 区 1} 关于 {vn,n > 1} 是 蒜 ; 

2” 有 1 是 了 于,… ,了 -1 的 函数 (n>2),21=0,2n < Znt1, BZn < 十 cc， 

且 上 述 分 解 是 唯一 的 . 口 
例 1 团 在 序 贯 决 策 模型 中 的 应 用 
考虑 一 个 可 控 的 随机 动态 系统 ， 状 态 空间 有 限 ， 记 为 9 = {1,2,… ,p}. 行动 集 4 = 

{4,5,.… ,1 有限 ， 有 时 称 4 为 决策 空间 . 设 我 们 每 经 单位 时 间 (如 每 小 时 ， 每 天 ， 每 月 

等 ) 观察 即时 的 系统 状态 i, 然后 从 4 中 选取 一 个 行动 a, 有 两 件 事情 发 生 : 

(I) 得 到 一 个 报酬 (或 能 量 ) x(i,a); 
(II) 在 现时 段 状 态 为 i, 采取 行动 为 a 的 条 件 下 ， 系 统 下 一 时 刻 转 移 到 状态 7 的 概率 

为 a(jli, a). 

我 们 的 问题 是 : 在 每 一 时 刻 如 何 选取 行动 ， 使 前 NN 时 段 的 期 望 总 报酬 (总 能 量 ) 达 

到 最 大 ? 

令 A; 表 上 时 段 采取 的 行动 ; Yi 表 时 段 系统 的 状态 ; hn_1 = {io,ao,ii,41,*…， 

-1; Qn-1} 表示 nn 一 1 时刻 及 以 前 系统 的 状态 及 采取 行动 的 交互 序列 ， 称 为 n 一 1 之 前 的 

历史 . 设 时 刻 采取 的 行动 (决策 ) a 依赖 于 hn,118 与 如 记 为 








Un 一 Nn (hn in) Nn (Zo U0, 21， C1， 1 Un-1, in), 


4.2 上 蒜 (下 蒜 ) 及 分 解 定理 


其 中 7 称 为 n 时 刻 的 决策 函数 . 


一 个 策略 r = {xo,71,… ,TN-1} 是 一 个 决策 函数 序列 ， 若 给 定 一 个 策略 r 及 初始 


状态 世 = i 则 直到 NN - 1 时 刻 的 期 望 总 报酬 为 
N-1 
V(x,i) = Bl Dr(Yi, Ar)| = 中 


= 


式 中 BE 表示 在 7 的 条 件 下 求 期 望 . 我 们 的 目的 是 选取 一 最 优 策略 **, 使 对 所 有 i <e 3， 


有 


V(7,i) = maxV(7,1i). 


Vi-1(2) = pe 十 并 GeowO l1<k<N. 
jE€ 


令 


Xn = > {Ve(Yi) — B [VE(YE)|Yo, Ao, Yi, A Yi- Ap-1]}. 
Kk=1 





由 $4.1 例 3 可 知 ，{X.n > 1} 关于 {( 卫 ,Ai),n > 0} 是 款 ， 于 是 


EX, = EX1=0. 





由 (4.2.3) 式 有 


Ve) > 7) + Yai oW(), vie Ss,a€h. 


jES 


Vi (Ye1) >7 (Fi, Ar-1) + > qj|¥1, Ap_1) Vl)) 
jES 
=7(Yi_1, Ar-1) + BE{Vi(Y)|Y 1 Ar-1} 


因此 由 马 氏 性 得 


了 -1( 玉 -1) 过 7( 玖 -Ar-i) 十 BE{Vi (Yi)| Yo, Ao, 五 ,Al， V1 Ar1}. 


于 是 有 
N 
0 = EXN =5{ [Vi (Yi) — B (Vi (Yi)|Yo, Ao,.: Wn hr 
下 三 出 


N 
2a{ Dv) + 7(Yr-1, Axr-1) — Wl) 
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N-1 
=5{ > "(Yr, Ak)+ Vy(YN)— Wty)}. 
为 二 向 


(4.2.2) 


(4.2.3) 


(4.2.4) 
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由 N—1 
BVo0) > Br 并 Ga 
= 


若 w=i, 则 上 式 说 明 ， 对 任意 7, 有 
N-1 


Voli) > Bl > "(Yi, A)|Yo = 中 


k=0 


即 Ww( 让 > V(r,i) 对 ViE5 及 所 有 7 均 成 立 . 
如 我 们 选取 QR_1 E 4， 使 ax_1(2) 3 NR (io, ad, 2 ,bp—1) 满足 (4.2.3) 式 ， 即 


Vi 1(0) =7(6 a (0)) + > ,ai oki (dD) VD) 
JES 
=mex{ "li 十 adili, A ES 
了 
则 i 三 {7 , RT, 人 ,Ty_1} 是 最 优 策略 ， 即 


Wi) = V(r,i), VE 9. 











换言之 ， 我 们 是 通过 使 每 一 步 均 取 最 优 来 达到 总 体 最 优 的 . 

从 上 面 的 例子 可 以 得 到 拷 应 用 的 感性 认识 .利用 拷 的 性 质 可 以 解决 许多 本 来 不 易 研 
究 的 问题 , 但 关键 是 怎样 构造 出 一 个 合适 的 怠 来 . 这 通常 也 不 是 件 容易 的 事 , 需要 经 验 ， 
也 需要 技巧 . 





$ 4.3 停 时 与 停 时 定理 


本 节 要 研究 当 了 是 一 随机 变量 时 ， BXz 是 否 等 于 BXo. 为 此 引出 停 时 的 概念 . 停 
时 是 一 个 不 依赖 于 “将 来 ”的 随机 时 间 . 先 给 出 粗略 的 直观 定义 . 

定义 设 取 值 为 非 负 整数 (包括 +~x) 的 随机 变量 T, 及 随机 序列 {了 ,mw > 0}. 若 
对 n> 0, 事件 {T= 2} 的 示 性 函数 Ifr=n} 仅 是 ,二 ,… ,的 函数 ， 则 称 了 是 关于 
{ 丈 内 >0} 的 停 时 (stopping tinme)j( 或 称 马 氏 时 间 ). 口 

为 今后 叙述 方便 , 引入 一 些 记 号 , 记 o(X) 为 由 t.v. X 决定 的 事件 及 它们 的 有 限 和 可 
列 运算 的 全 体 构成 的 事件 集 . 简称 为 由 X 生成 的 事件 o 域 , 它 表示 由 +.v. X 可 能 提供 的 
全 部 信息 . 同样 , 记 o(Yo, 六 ,… , 诉 ) = o( 球 ,0 <n), 称 之 为 由 zt.v 序列 YY,… ,YY 
生成 的 事件 ce 域 . 它 表示 由 Yo, 关 ,…. ,六 , 可 能 提供 的 全 部 信息 . 例如 ， 在 样本 空间 9 中 
定义 的 事件 4 及 B 的 示 性 函数 I 及 Is, 那么 120 














o(Ta) 3 {0, 4, 45， 8) (TB) > {0, B,B,Q), 
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ra,TB)=f4,B.45,B5C4-BB-44B.4UB,(4-B)5C(B-4)5,04B)5， 
(4UuB) 4-BIUB-4[4-B)U(B-4)] ,91. 


通常 简 记 
fn =o(Y;,0 < 加 < n) = o(Yo, 1,: ,Yn), n> 0. 


震 Yn>0.{T=n}E 态 , 则 {T=n} 与 {TT 关 n) 完全 取决 于 过 程 直到 n 时 刻 的 信息 
(76, 了 于,… , 了), 而 与 过 程 的 未 来 无 关 . 

由 定义 知 , 着 Yn > 0, 事件 人 和 人 和 > 人 二 > 人 全 < 个 均 只 由 
(Yo, 于 ,… ,也 ,) 确定 ， 则 了 是 一 停 时 . 

因此 ， 下 面 给 出 停 时 的 确切 定义 如 下 : 

定义 设 有 非 负 整数 的 随机 变量 工 , 及 随机 序列 {Yn > 0}, 万 = o(Yi,0 <%<n). 
若 对 Ynz >0, 名 =?E 万 ' 称 则 了 是 {Y,n > 0} 的 停 时 

对 随机 过 程 {Y,n > 0}, 令 T= min{n :总 € 4}, 即 工 是 首 达 4 的 时 间 . 则 了 是 关 
于 {了 ,n> 0} 的 停 时 : 因为 {>n}= {ww :于 4 4,YEk<n}e. 即 事件 {T >n} 发 生 
与 否 完全 由 (Yo, 六,… ,也 ) 确定 . 

例 : {NN(),t > 0} 是 参数 为 和 的 时 齐 Poisson 过 程 ， So = 0, 5 为 第 nn 个 事件 发 生 
时 刻 ， 则 N(t) 关于 {Sn,n > 0} 不 是 停 时 ， 但 N(t)+1 关于 {Sn:n > 0} 是 停 时 . 

显然 人 = k(k 是 一 常数 ) 是 一 个 停 时 . 

停 时 有 以 下 基本 特性 : 

设 T,o 是 关于 { 玉 ,> 0} 的 两 个 停 时 ， 则 工 + 7TAc = min(T,o),TVYo = 
max(T,o) 均 是 停 时 . 

下 面 介 绍 有 关 停 时 定理 (Optional stopping theorem 或 Optional Sampling theorem). 

为 此 ， 先 介绍 以 下 几 个 引 理 ， 

引 理 4.3.1 设 {Xm > 0} 是 一 关于 {Zm > 0] 的 (上 ) 蒜 ， 了 是 一 关于 {Y,,n> 0} 
的 停 时 ， 则 vn > 有 

















如 和 Tri))(<) = E(Xy.Lrn)). 


证 : 注意 到 7 是 关于 Yn 绽 0} 的 停 时 ， 则 { 工 ~ k} 仅 与 Yo, Yi, ee ,Yr 有 关 ， 所 
以 r=#) 是 关于 瑟 , 五 ，… ,六 的 函数 .因此 


E(X, Tr=x)) = (BR Tr=x)|Yo, Yi, We ,Yi)) 














=E (TAN E(Xn|Yo, Yi ,Yi)) (<) = Tar Xx). 


时 ， 则 vn > 1, 有 


EXo(>) 二 EXTAn(>) 一 EX,. 
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证 : 注意 到 Tr<n} + TrT>n} = 1, 并 利用 引 理 4.3.1 得 
n—l 
EXTAn -fw (> TT=x} Ek lirzn ) } 
入 二 各 
n—1l1 
=B {Xr Dr) + E{Xran : Tr>n}} 
k=0 
n—l 
= EB{Xran :ITz-D} + EB{XrAn : Tr>2n}} 
k=0 
n—l 


= > E{X ' T(rT=x}} 十 EB{X, TrT>n}} 


k=0 
n—1 co 
(2)= 》 B{Xa :Tri} + EB{Xn TIrza} = EXn: Trt = BEX. 
k=0 k=0 


因此 
五 XTAn( 二 ) 一 EX,. 
对 于 蔷 ， 因 为 BX, = BXo, 所 以 BXrn, = BXo. 
对 于 上 款 ， 下 面 证 明 BXo > BXrnn. 设 
Xo =0, 
Kn = [Xr — BE(XEIYo, Yi Yi)], n>1. 


E=1 
根据 $ 4.1 例 3 可 知 ， {有 ,,n > 0} 关于 {Y,,n > 0} 是 著 ， 由 著 的 性 质 可 知 


BEX, = EXr,, = EX, = 0, 


因此 有 
呈 TAn 
0 =EXrnn = s|> (i RI) 
二 
TANn 
ble (由 上 欢 定 义 得 ) 
hl 
=E(XTAn 2 文 0) 一 E(XTAn) E(Xo). 
因此 











EXrTnn < EXo. 


引 理 4.3.3 设 X 是 一 随机 变量 ， 满 足 EI|X| < x. TT 是 关于 {六 ,n > 0} 的 停 时 ， 且 
P(T < sc)=1 则 





lim 王 ( 王 .Trynalpz0， 


lim E(X .1r<n}) =BX. 
n=00 


4.3 ， 停 时 与 停 时 定理 








证 : 因为 
|X| 一 |X|ITr<n} 十 |X|IrT>n} > [XIIr<n), 

并 且 

lim 1{T<n} 二 lm >》 ,Tiz-N] 二 》 Tar = 

N= CD 和 k=1 
因此 

je 
k=0 
于 是 有 
lim E(|X|IHr<n}) = lim E(|X|: Troy) = 0. 
由 上 式 知 
lim E(X:Ir>yn})=0. 

又 因为 


(一 ce) , 
[EB(X Tr<n}) ES EX| 一 IBEX Tr>n}| < ElX “ Trryn}| 一 E(|X|Tr>n}) 全/ 0. 


即 
lim E(X. TT<n)) = EX. 口 
定理 4.3.1 设 {X,n > 0} 是 蒜 ，T 是 停 时 , 着 P(T<xx)=1, 且 
El(sup |XrAn|) < %, 
n>0 
则 
EXT = EXo. 
证 : 记 Z= SUpn>0 [XTAnl. 因为 
XT 二 D(x “TT=xk}) = y 有 TAR * THT=E}): 
k=0 k=0 
因此 
[Xz|=| > (XTAR HT=1})| < ZX “TT=x}) 
< he 下 rn ys 一 a up Xrnn| = i 
k=0 
123 
所 以 有 


BXr| < B(2) < ~. 
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即 BXr 有 意义 . 
又 


[EXTAn — EXT|=|E[(XTAn — XT): Tryn}] + EI(XTAn 一 X7) Hr<n}|| 
=|B(XTAn — XT) :Tr>n}| < BI(XTAn — XT): HT>n}| 
SEl(Xran :Tryn}| + BIXT :Trsn| < 2B02 Tr>n}). 
由 引 理 4.3.3 知 ln 2(Z .Itryn}) = 0. 因此 
lim EXrnn = BX7. 
又 由 引 理 4.3.2 得 EXT = BX. 所 以 
EXr = Jim BXran= lim BXo= BXo. OD 


推论 : 设 {Xn,n 之 0} 是 蒜 ， 下 是 停 时 ， 且 ET< cc， 若 存在 一 常数 b < >c， 满足 对 
vn<T, 有 





E(|Xn+1 — Xn||Yo, Yi ,YY ) < b, 





则 
EXo = EX7. 
证 : 令 
Zo =|Xol, 
Zn =|Xn — Xn-1il, n>1, 
W =20+ 21+.…+27. 
则 
W =|Xo| + | 一 ol 十 十 | — XT-1), 
co nn co 2%0 a 
BW =2, 2 B(Zi Tr=n)) = SD > E(ZrTT=n}) = DE(Z ， JIT>A) 
n=0k=0 k=0n=k k=0 


因为 Jr>nj = 1 一 Tfrcn_1) 仅仅 是 巧 ,页 ,到 -1 的 函数 ， 又 由 已 知 条 件 知 ， 对 < 了 
有 BE(Zr|Yo,..: , Yk-1) < b. 因此 


DE(Z “ T{T>8k}) = 》 BE{E(Z ‘Trrzp} |Yo, Yi ,Yr 1)} 
k=0 k=0 


a “BE(Zr|Yo, Yi , Yi-1)} 
k=0 
Zh PT > £) =2b(1+ BT (利用 5 P(T > = ET) 
到 二 总 Re 


< 
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即 EW < x. 因为 |Xr| < WW, 因此 |XzrAn| < WYvYn>0, 即 
supn >0|XTAn| <W. 


所 以 有 
E(supn>olXTAn |) & EW < ~. 


又 因为 BT < ~, 因此 有 
PT < co] = 1 


利用 定理 4.3.1, 即 得 
EXr = EXo. OD 


定理 4.3.2 ( 停 时 定理 ) 设 {X,n > 0} 是 蒜 ， 了 人 是 停 时 ， 若 
1 :BP(TRH) EL 
2° ElXr|<~:; 
3° lm BIXn Try = 0. 
则 
EXrTr = EXo. 


XT = XTIT<n} + XTHT>n}, 


及 


KTIT<n) = XTAnTT<n} = XTAn(l -Hrsn)) = XrAn— RTAnTTSn} = XTAn — XnlT>n)-: 


XT = XTAn EE 了 Xn . T(r>n} 冰 XT Tryn): 


因此 
EXT = EXTAn — E(Xn: Tryn}) + E(XT :Hrsn}): 





由 已 知 limn ~ E|Xn Trrsn}| = 0， 则 


lim E(X, :Tr>n})= 0. 





由 引 理 4.3.3 得 
lim E(XT: Ir>n})= 0. 


因此 125 


lim EXTrAn = EXr. 
R00 
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而 由 引 理 4.3.2 知 BXTAn = BXo. 故 
EXo= EXr. 口 


这 个 基本 定理 有 以 下 简单 推论 . 

推论 1 设 {X,,n > 0} 是 款 ， 了 是 停 时 ， 若 
1 

2"。 对 某 个 有 < oo,Vn>0,B(X2,) <k. 





则 
EXo = EXr. 
证 : 显然 X3,, >0. 由 2” 知 
E(XZnlren) < B(Xn) <h. 
而 
BE(XTAnlT<n}) > BIX#|T 二 ] P(T = k) 
k=0 
TS =k):. PT=k)= EBX?, 
k=0 
因此 


由 Schwartz 不 等 式 可 得 


二 


ElXr|= ElXr :1| < [BC < cc， 


及 
(BE(Xn Try 站 二 [E(XTAn 3 Trsn})]’ < E(X?,,) EB(Ifr>a}), 
即 
(BE(X, Trrsn}))’ < k. PI{T > n} A 0. 
因此 
‘lim BIXa Trsn]=0. 
利用 定理 4.3.2 得 











EXo = EXr. 





推论 2 设 Yo = 0, {Yr., Bk > 1} 独立 同 分 布 ， EY a 4, DY ee 0? < 2c, 90 De 0, 9 es 
2_ ,Xn 二 5% 一 n4. 车工 为 停 时 ET < ol 知 


El|Xr|< ~%, 


4.3 ， 停 时 与 停 时 定理 


且 
EXT 二 EST > HET ="0: 
证 : 因为 BT = 下 kP(T = 上) < 十 sc, 从 而 余 项 
ybPT = 月 一 0 (7 一 co)， 
k=n 
文 oo 《 
> kKP(T= Ek)> > nP(T=Ek)=nP(T >n)— 0, 
en yy 


故 mnP(T>n) 一 0, (n 一 2%). 因此 
PIT>n)o0, (no %). 


从 而 
P(T < x%)=1. 


了 
BIX7|= ElSr — Th| < E(Y |Yi —p)) 
ha 


因为 {法 ] 独立 同 分 布 ， 所 以 {| 孤 一} 独立 同 分 布 ， 所 以 
T 
EB(O IW) = BET. BY- /<% 
st 


于 是 
EIXr| < 十 ce， 


由 Schwartz 不 等 式 得 


[E(XnTrTsn})) < EBX? E(Tryn}) <S nn?P(T >n)= on. PT > n)). 





由 前 面 的 证 明 过 程 的 中 间 绪 论 nP(T > n) 一 0, (n 一 so) 知 


lim E(X,, < Trr>n}) > 0. 


用 一 CO 


利用 定理 4.3.2 得 

















0= EXo= EXr = ESr 一 人 五 了 
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如 何在 实际 中 应 用 停 时 定理 与 推论 呢 ? 这 里 介绍 一 个 应 用 停 时 定理 的 例子 . 
例 1 随机 游 动 
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令 页 = 0.{ 歼 ,> 1} 独立 同 分 布 ，P(Yi =1)=p>0,P(Y =-1)=g=1-p>0. 
令 Xo = 0, Xn = Do i 记 


To; = min{n : Xo = 0, Xn = 了 

了 T=min{n :Xn 二 4 或 Xn = 0),5 > 10 为 正 整 数 ,a < 0 为 负 整数 ， 
Ts =minfn: Xo=0, XK #1<1<n— 1, X=), 

VV =P(sT, < x|Xo =0), 访 表 从 0 出 发 先 到 达 4 的 概率 


则 PlD < IXo=0)=1-W. 

若 以 赌博 (或 投资 ) 为 背景 . 设 甲乙 两 人 赌博 ，|a| 表 甲 原 有 的 资金 ，Y, 表 甲 第 nn 次 
得 到 的 钱 ，5 表 乙 原 有 的 资金 . 那么 V, 表示 甲 先 输 光 的 概率 . 

分 二 种 情况 讨论 

1°” 当 p=g=3 时 

易 证 P(To1 < |Xo = 0) = 1( 见 第 三 章 练习 题 )， 由 Xz,, 定义 知 ， Xz,, = 1. 故 
EXT = 1, 而 BXo = 0, 所 以 BXT,, 关 BXo. 易 知 {Xi,n > 1} 关于 {于 ,n> 1} 是 
就 ， Ti 关于 { 卫 ,,n > 1} 是 停 时 ， 由 定理 4.3.1 的 推论 知 ，ETo1 < ~ 不 成 立 (因为 若 
BToi < %, 则 BXzr = BXo 二 0), 故 











五 了 701 一 十 >c. 
易 证 P(T < cc|Xo 二 0)=1. 而 |XzA| <maz(|la|,?), vn > 0. 因此 有 


E (eww [XTAn |) < co， 
n>0 





由 定理 4.3.1 得 

EXr = EXo= 0. 
但 

EXr = Vat+(l— VV)b=0, 
解 之 ， 得 
2 
“a+p 

这 就 是 甲 先 输 光 的 概率 ， 同 理 

a la 

WW=1—V = 辐 守 议 
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如 何 求 B(TIXo = 0)?, 即 任何 一 方 输 光 的 平均 时 间 是 多 少 呢 ? 这 需要 构造 一 个 合适 
的 鞠 来 解决 . 


43 ， 停 时 与 停 时 定理 


设 Zn X2 一 ?7 先 验证 它 关 于 {Yarn 六 0} 是 蒜 . 因为 


El2Z,|= EIX2—n|< EX2+n< ec， 


BE(Zn4ilYo, Yi Yi) = BE(X2L1 — no1|Yo, Yi ,Y,) 
=E((X, 下 Yn 4) |Yo, Yi,- A ,Yn) (n 让 1) 


=BE(Xa|Yo, ,i) + 2B(X YorilYo. ,Ti) + B(Y2L Yo ,Yh) — (n+1) 


=X2+2X,:0+1— (n+i+1)= Xn= 2,. 





所 以 {有 ,n> 0} 关于 {Y,n > 0} 是 对. 
由 于 了 为 停 时 ， 且 BT < x( 由 第 三 章 练 习 ). 另外 
BE(|Znt1 — Zal|Yo. ,i) =B(X241 — (n+1) — Xi+nl|Yo,. ,Y,) 
=E(|2X, :Yt + Yar — 1||Yo,.* , ¥,) 
<2B(| Xn Tatil|Yo, ,Yh) + BY? |Yo,* ,1)+1 
=2|Xn|: ElYn4i|+1l+1<2(maz(lal.b))+2< ec， 











由 定理 4.3.1 的 推论 知 
EZT 一 EZo = 0. 
而 由 于 
EZr = E(X7 —T)= EX — ET, 

因此 

pe 2 3 9 D D 全 

卫 了 二 一 X7 二 “人 vb-(1—V, a b”. 二 b. 
T=a Vth( )=&a rt a lal 


2。” 当 pg = 4>0 时 ， 这 是 不 公平 赌博 ， 甲 方 赢 的 概率 大 ， 这 时 的 V 是 多 少 呢 ? 
为 此 仍 需 要 构造 喜 ， 注意 到 此 时 BEY, = pg=4. 令 UU, = XX 一 ny. 
因为 
ElUn|= ElXn 一 US BIXn|+np < n+np < 十 se， 


BE(Unri|Yo, Yi,: 0 ,Yh ) =E(Xn+1 一 (2 十 1)u|Yo, Yi, i ze) 
=E(X,, + Yati|Yo, 1,: ,n+1l)n 
=Xn+t+h— (n+l)n= Xn, — nn= UU,. 


因此 {Un > 0} 关于 {了 7,,n > 0} 是 轴 . 
另外 ， 由 于 129 





吾 (| — Ual|Yo, ,Yi) = BYati — HY ,Yi) = ElYnri — pH) = pg < < 
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因此 由 定理 4.3.1 的 推论 知 ， 在 BT < ~ 的 条 件 下 EVr = BUVo, 故 
EXr = juET. 


令 克 =(2)*", 由 于 p>g, 故 0<4<1. 下面 验证 {V,,n > 0} 是 鞭 , 
因为 
4d \x qd 、 磋 ， dy 
EV = 如 (| = B{(L)x*} = TT B{(L)Y)} =1<%, 
ols Bl | lI Wl 


EV), ) =B{) Nt Yo 5)} = BE{E)Y (Yo a)} 


= Bl pt 
了 为 


) = "=. 
2 p 


人 
2 2 
因此 {WW.n > 0} 关于 {了 .n> 0} 是 拷 . 

由 a<X,<b0<2<1 得 


(2 < Vz< (0) 
p p 
因此 
ElVr|= E(Vr) < 0 < 十 cc. 
故 


0< lim E(Vlr>n}) < lim (2)"Bfrtz>m]} = CF lim P{T > n}=0. 
此 处 ln ,~ P{T > n} = 0 是 因为 当 p-g = >0 时 ，[a,0| 为 马 氏 链 {X,.n > 0} 的 非常 
返 状 态 集 . (XX, = 让 € [a, 9 至 多 有 限 次 , 故 有 P(T < x)=1, 即 ln,» P{T>n}=0. 
由 此 得 





lim E(V, :Trsn})=0. 


n=00 


于 是 由 定理 4.3.2 得 
EV = BEV. 


另外 ， 由 于 EW = 了 xs =1, 因此 
EVr=1. 


同样 地 记 WW = PUm < wc|Xo = 0), 有 


EVr= Vd) + (1 Ve=1. 
p p 


解 之 ， 得 130 
= 
人 


44 ， 诗 收敛 定理 














故 从 0 状态 出 发 ， 当 P > 4 时 先 到 达 a 的 概率 小 于 p = 时 先 到 达 a 的 概率 . 





$ 4.4 拷 收 敛 定理 


设 {Xi,n>0} 关 于 {,n > 0 是 (上 ,下 ) 团 . 我 们 要 研究 在 各 种 意义 下 ,lim 四 
是 否 存 在 的 问题 ， 即 款 收 敛 的 问题 . 为 此 ,我 们 介绍 靳 收敛 定理 ， 该 定理 是 利用 讽 解 决 许 
多 不 同 领 域 问 题 的 重要 工具 之 一 . 

在 氢 述 蒜 收 敛 定理 之 前 ， 先 介绍 一 个 重要 引 理 ， 即 上 穿 不 等 式 . 为 此 ， 先 考虑 实数 列 
{an]} 的 收敛 问题 . {o,} 没有 有 穷 或 无 穷 极 限时 的 主要 条 件 是 liminf, ,< an < limsup, wan 
即 必 存在 二 实数 a,b, 使 


liminf a, <w<D< lmsupan， 
Sh n>00 


用 图 形 来 直观 解释 (如 图 4.4.1), 就 是 {a,} 无 穷 多 次 到 达 a 之 下 ，5 之 上 . 即 {fa} 
上 罕 (a,5) 无 穷 多 次 . 于 是 研究 {X}】 的 收敛 性 就 要 研究 穿越 (a,5) 的 次 数 问题 . 





图 4.4.1 


引 理 4.4.1 设 {Xn} 是 关于 {7} 的 下 拷 ，5,T 是 关于 {Y} 的 停 时 , 假定 0< 5 < 
T<N, 则 


EXs < EXz. (4.4.1) 





证 : 设 固 定 ，<n. 因为 Tfr>n) 仅仅 依赖 于 瑟瑟 ， 丈 , 利用 条 件 期 望 的 性 
质 可 得 


E(Xnt1: Trsn} :Ts=£}) =B{E[Xn 1: Trsn} * 瑟 页 2]} 
=B{BRl ,|Yo, Yi ,Yi) :Tryn) Ts=n}} 
>E(X, :Trsn} :Ts=k}). 
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=E[XTAn+1) THz<a Ts- 有 十 五 Er THr>n * Hs=x}] 





=E XTA(n+1) Trs=p}]. 


因此 E[XrTAn ly Js=A] 对 于 7% 是 单调 增 函 数 . 
由 假设 5 < T, 故 
E(Xs.: Trs=k}) < E(Xr “Tsok}). 


因此 

N Ny 
EXs =E(》 Xs: Ts) = > BE(Xs Is-n)) 
天 二 0 天 二 站 


N 


< BCXT :THs-m)= EB(Xr. > Is))= EBXr. OO 
k=0 k=0 


设 {Xn} 是 随机 序列 ， 令 VV(a, b)(w) 是 (Xo(w), X1(w), 2 ,Xn (w)) 向 上 穿越 (a, 中 
的 次 数 . 令 ao = 0 记 a 为 {} 首次 到 达 (oe.al 的 时 间 ， as 是 ai 之 后 首次 到 达 
必 , +>c) 的 时 间 ， 即 
ad =min{n :n> 0,X, <a)}, 


aa =min{n :n> ai,X > 0). 
依次 类 推 ， 归 纳 定义 为 
aa2j 1 二 Ininf{m :n> ao2k2 Kn < a}, 


Qog =min{n :n> oap_1, Xn > 0}. 


显然 ， 当 上 且 仅 当 az < nn < aa0+0 时 ， VY(a,b)(w)=1. 
引 理 4.4.2 (上 穿 不 等 式 ) 设 {X,n > 0} 关于 {了 Y.n > 0} 是 下 载 ， Ya,0) 表示 
Xi 上 穿 区 间 (a,8) 的 次 数 ， = 0,1,…,n. 则 





E(X, a)t > E(Xo a)t < EX+ lal 


4.4.2 
六 一 3 bo—a ( ) 


E(V™)(a,b)) < 





这 里 记 at = max(a,0) 二 aV0. 
证 : 因为 {X} 关于 {六 } 是 下 拷 . 因此 {( 各 2 一 0)*} 关于 {5} 也 是 下 款 ， 这 是 因 
为 


El((X, —a)t|< EIX,|+lal < ~, 


44 ” 著 收 敛 定理 


E{(Xn+1 站 a)t |Yo, ¥, cl 9 一 吾 (Xi1 Vw 一 d| 巧 ,五 … ,¥) 
=E(Xnt1V a|¥w,¥, “hh)—a 





=BE(Xn+1|Yo, Yi, 人 


>X, Va—a= (X, 一 o)+. 


另外 {(Xn 一 a)+,0 <k<n} 上 穿 过 区 间 (0,5 一 a) 的 次 数 也 为 Vi(a.5b). 
令 Bk = ax 人 An,(k 之 站 .部 ,= (Xn 一 +. 由 前 面 结果 可 知 { 况 ,} 关于 {Y} 是 下 园 
因为 所 有 的 ox(k > 0) 都 是 [Xs} 的 停 时 ， 因 此 也 是 {Y,} 的 停 时 ， 所 以 Bi(k > 0) 
也 是 { 丈 } 的 停 时 根据 引 理 4.4.1, 有 


BE(X3, 过 Xp ) >0. 


De 


了 (部 - KE) = YB(Ko, ~ Ko,,) > Da ee 


Kel 法 


当 VOV(a,5) > m 时 ， (3,, 一 站 3,,_,) 才 为 非 零 ， 且 其 至 少 为 5 一 a. 即 


(X83,,, Bs 1) > (2 一 ov (ab)>m): 





因此 
E(X, — Xo) >(b— a) a Treotwazmj] 
一 (一 四 >》， PUVC)(a 人 > 加 ) = (baB{VV (a.b))}. 
m1 
于 是 有 
EV gc< BE(X, -Xo) _ om. ee le .es g EX+ + lal 











bp—a bp—a bp—a 


推论 : {Xn > 0} 是 关于 {了 ,n> 0} 的 上 著 ， 下 (a.5) 是 并 下 穿 (a.5) 的 次 


数 ， 则 
1 





E(V'" (u,b)) < 5—[B( A Xo) — BX 和 人 (4.4.3) 


如 果 XX > 0,5>a>0, 则 
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下 面 证 明 在 什么 情况 下 ， 一 个 款 {X,} 在 n 一 x 时 将 趋向 一 个 期 望 有 限 的 随机 变 
量 . 
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定理 441 设 {X,} 是 一 个 下 载 ， supu BIX,| < x, 则 存在 一 随机 变量 X。, 使 
{Xn} 以 概率 1 收敛 于 XX 即 


P( lim X= X%)=1. (4.4.4) 
及 一 Do 
且 ElX,|< cc. 
证 : 首先 ， 由 于 
EX+ < EIX,| < 2EX+ 一 EX,. 
故 


sup BB|Xn| < sc 当 且 仅 当 sup BX+ < oc. 
另 一 方面 ， 当 7 一 DO 时 ， VV (a.b) 所 Vl(a, b) 二 {Xn 上 穿 (w， D) 的 次 数 }. 故 


E(V(a,b)) =E{limV VY}(a,0)} = lin E(VIV(a,b)) 
nn no0 
jy EX+ + |al 2 SuPn EX++|al 





< li pe po < oo 
因此 
P(V(a.b) < %)=1. 
从 而 
Pl(V(a,b) =+x)= 0. 
于 是 
P{w :nn 一 oc 时 Xn(w) 无 极限 } 
=P (J {wv :liminf Xi,(w) <a<b< limsup Xa(w)] ) 
4<b 且 为 有 理 数 | ee 
=P U {w :V(a,b) = + =0. 
a<b 且 为 有 理 数 
因此 


Plw :7 一 cc 时 X,(w) 有 极限 ) = 1. 
设 li sss Xn(w) 二 XX (w), 则 
P{w: lim Xn(w) = Xr(w)}=1. 
另外 ， 由 Fatou 引 理 134 


ElXw|= E( lim |X,|) < lim ElIX,| < sup 殖 | 和 | < sc， 


44 ” 著 收 敛 定 理 


即 














E|X%w|< oo. 


有 关 拷 的 收敛 定理 内 容 极其 丰富 ， 下 面 再 介绍 一 个 有 名 的 最 大 值 不 等 式 与 男 一 个 收 
敛 定 理 . 

最 大 值 不 等 式 (The maximal inequality). 

我 们 知道 ， 当 YW, 二 ,…: :区 :独立 同 分 布 , 且 BY; = 0, EY? = > 0),Xo = 
0, Xn = 站,_1 六 时， 对 任意 。 > 0, 根据 Chebyshev 不 等 式 ， 有 


exP(|Xn| > sj < no’. 
根据 Kolmogorov 不 等 式 ， 有 


cs2P( max |Xx| > <) < no’. (4.4.5) 
O0<k<n 


这 些 不 等 式 应 用 到 著 中 将 非常 简单 而 有 效 . 
引 理 4.4.3 设 {X,} 是 下 式 ， 且 Yn > 0 X, > 0, 则 对 任何 入 >0, 有 


AP( max X > 入) < EX,. (4.4.6) 
0O<k<n 


证 : 令 代 = min{k :> 0,Xi > 和, 则 Xr > 入 .利用 引 理 4.4.1 得 
EXn > EXTan > E(XTAn Tmaxocnen Xr>N)): 
注意 到 当 {maxo<n<n Xk > 入 } 事件 发 生 时 ， 人 < n, 于 是 有 TT 和 人 n= 了 7, 故 
BXn > BE(Xr «Tomarocres Kh>N) > AB(lomarocrss Xs>%) = AP( mes, Xr > NA). 口 
推论 : 设 {X} 是 癌 ， 则 对 任意 和 > 0, 有 
ey lS A Pls 
证 : 只 要 证 明 |X,| > 0 是 个 下 款 , 利用 引 理 4.4.3 即 可 证 明 . 因为 {X,} 是 蒜 ， 因 此 
EllXnl| = EIX,| < ~%, 
E(|Xutil|Yo, ,Ya) > |E(Xnti|Yo,. ,Yi)| = [Xnl. 
故 {|Xn|} 是 下 蒜 ， 由 引 理 4.4.3 得 135 


AP( max |X;| > 和) < EIX,l. 口 
0O<k<n 
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定理 44.2 设 {X} 关于 { 世 是 灼 ， 且 存在 一 常数 使 "mw EX < < sc, 则 存 
在 一 有 限 随 机 变量 和 ,使 得 
了 Un Xn = X%) =1, 
im BIXn — Xool? =0. 
更 一 般 地 ， 
EXo = EX, = 古 X ，Vm， 
证 : 本 定理 证 明 较 长 ， 在 此 略 去 . 有 兴趣 的 读者 可 参看 [2]. 














§ 4.5 连续 参数 蒜 


定义 {X(t),t > 0} 是 一 随机 过 程 ， 记 ft = o(X(s),0 < s < 过 程 {X(t),t > 0} 
是 蒜 . 如 果 

1°” Vt>0, 有 EIX(t)|<~， 

2” Ys,t>0, 有 (X(t 十 3)| 琴 ) = 六 (t) a.s, (几乎 处 处 ). 

3” vt > 0,(t) 关于 开 是 可 测 的 . 

将 这 一 定义 离散 化 ， 则 可 写 为 

定义 随机 过 程 {X(t),t > 0} 是 蒜 , 如 果 

1° Yt>0, 有 EX(t)|<~, 

2° VO<to<ti < <th <tr 有 EC(X(tnri)| Xt) ,X(tn)) = X(tn) as. 
(几乎 处 处 ). 口 

同样 可 以 对 连续 参数 定义 上 革 和 下 讽 ， 

与 离散 的 情形 类 似 ， 连 续 参数 蒜 的 停 时 定义 为 : 

定义 设 有 非 负 随机 变量 工 , 及 随机 序列 {X(t)t > 0}, =o(X(s),0 < s < 阁 对 
vt>0, {TT 和 村 E, 称 则 了 T 是 {X(t),t > 0} 的 停 时 . 口 

停 时 定理 设 {X(t),t > 0} 是 蒜 ， 了 全 是 停 时 , 者 P(T < x)=1; 且 














吾 (sup |XzrAt|) < cc， 
t>0 


则 
EX(T) = EX(0). 
定理 的 证 明 与 离散 蔷 停 时 定理 的 证 明 类 似 ， 留 给 读者 作为 练习 . 
例 1 设 {N(t),t > 0} 是 时 齐 Poisson 过 程 965 参 数 为 A, 和 A> 0 令 X(t) = N(t) — 
At, Y(t) = X(t) — A Ut) = exp(—0X(t) + A(l — e710)), 0 为 参数 ， -= < 9 < ~x. 则 
X(t), 了 Y(t),U(t) 是 团 . 


练习 题 


练习 题 


41 设 {n> 1}iid, 且 Pl(Y, =1)=p>0.PY=-1)=q>0p7+4=1p-4> 
0, 巧 =0, 令 





Xo = 0， Xn = Sy Un = Xn—n(p—q), WV = Gh Wa = Ua —nl1—(p—g)]. 
hl 
1. 证 {0,n> 0}, {Wn> 0 {WW,n> 0} 关于 {了 ,n> 0} 是 和 鞍 ; 
2. 证 { 忆 ,> 0} 关于 全 ,n> 0} 是 下 描 ; 
. 求 Cn 与 Untn 的 相关 系数 ; 
. 求 B(Us|X) 的 分 布 律 并 证 明 E(UVnyi|Xn)= Un, Vz>0; 
. 求 BE(Vs| Xr = 3). 





CU 必 Co 


42 设 巧 =0,{ 凤 ,nz> 1} iid, 
1. 车 BY, = 0,BY? 二 o?. 令 


nn 
Xo=0, Xn=( ) no’. 
天 二 1 


2. 若 芒 ~N(0,07),X = exp{ 入 可 Wj 一 3],n>1,Xo=0. 证 明 {X,n> 


0} 关于 仔 , ,n> 0} 是 鞭 ， 
4.3 ( 续 4.1) 令 a,5 为 正 整数 ， 





B=mnfn:n>1,X=0, T=minf{n: X= —a, 或 Xx, = 人， 








试 证 
ET, 
p—g 
7 _ 0 
pr _ ot?.1 Cg 
p—-g 2D-4 1-(p/g)"t 
bl1—(p—g) 
Va T, = -P00 也 9)] 


(PP 一 人) 
4.4 设 随 机 变量 序列 {天 ,n> 0}, 满足 EI|Xi| < x, 且 
E[Xn+1|Xo, X1,.. : .9 = aXn+pPXn-i, n>0, Bae>0, a+p=1. 
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令 Y, = aXn 十 Kn. > 1. Yo = Xo. 试 选择 合适 的 a 使 得 {Yn ,n> 0} 关于 
{Xn> 0} 是 扶 . 
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4.5 设 {X,n > 0 关于 {,n > 0} 是 蒜 . 证 明 对 任何 整数 集 <1< m, Xi 一 Xi 与 
XX 不 相关 ， 即 E[(X,, 一 成) = 0. 

4.6 设 {Xn > 0} 是 著 ， 而 {&i,i > 0} 由 下 式 部 分 和 确定 ， X，= 学 "6&;， 试 证 
YI 天 六 E{éit))=0. 

47 设 Vn>1, BEX; <k<>. 令 55 = Dp-1Xr. 已 知 {5,,n>1} 是 拷 . 证 明 Ye> 0， 


i (多 2 <) = 
( 提示 : 利用 最 大 不 等 式 与 习题 4.6 的 结果 ). 


4.8 设 Ww 服从 (0,1) 上 均匀 分 布 . 且 给 定 辣 时， 二 41 是 (1 一 也 ,1] 上 的 均 色 分布. 令 
从 0 三 了 0， 





证 明 {Xn > 0} 关于 {了 ,n> 0} 是 加 . 
49 设 {Xi,n > 0]} 是 M.C., 状态 空间 为 9 = {0,1,2,…,N}. 


1. 车 
i Nj _ X(N — x,) 
pi = CN(w) NN) Wn = TN 
试 证 {Xn,n > 0} 与 {Vi,n> 0} 关 于 {X,n > 0} 是 鞭 ， 
2. 若 | 
| CS CN (N — X,) 


pij = OR W, = Xn Rn 


试 确定 和 \, 使 {Wi,n > 0} 关于 {Xn,n > 0} 是 团 . 
4.10 设 {Xn,n>0} 是 M.C.,S= {0,1,2,…}, pij = eT ij ES. 
1. 证 明 {X,,,n > 0} 是 著 ， 
2. 对 a 二 1,2,… ,证明 Pl(maxocn<x Xn>alXo= 人 <; 
3. 证 明 Pllim_,w Xn =0)=1. 
(提示 : 令 了 = min{n :n> 0, X= 二 0 或 了, = ,然后 利用 停 时 定理 .) 
4.11 设 {Xn> 0 为 M.C., 5S = 1{0,1,2,…}, pij = 1/[e(j 一 让 i € 5, 7 之 i. 试 证 
{Fh = Xi n,n>0}, {0 =7—n,n>0} 及 {V, = exp(Xn-n(e 一 1)), n>0} 是 
蒜 . 
4.12 设 {X,n > 1} 是 下 载 . 令 


n>0. 





Ui=0, Un = DJ {BIXi|X1, Xo 38 ,Xi_1] — Xi_1}, n>2. 


i=2 


试 证 {Un > 1} 是 单调 增 过 程 ， 即 DU, > U1. 





练习 题 


4.13 设 {Xan>0} 是 M.C., 5 = {0,1,2.], P= (py), Po = (pt ). 有 wli,n) 对 


Vi,n& 5, 满足 


D0 


u(2,n) = Du (k,n m)p; (mm). 


k=0 
记 Uh = w(Xn,n). 证 明 {Vi;,n > 0} 关于 {X,n > 0} 是 蒜 ， 
4.14 设 {0%,},， {WW} 关于 {了 } 是 款 ，Do = WW =0,，BUV? < ~, BY < cc. 证 明 


E(UaVa) =》 El(Us — Us) (Ve ~ Vi)], 


k=1 


BU? = El(U: — Ur-1)]. 
k=1 


4.15 设 {Xn > 0} 是 款 ， 且 对 某 一 w> 1,B[X,|*] < < vn > 0. 证 明 


CQ 
之 a 1/a 
人 


( 提示 Blmaxo<x<n | = i P(maxo<k<n | 和 | > t) dt, 并 利用 最 大 不 等 式 于 下 炽 


{EEalem > 0}.) 
4.16 设 {X,} 是 非 负 上 圣 ， 证 明 vA > 0， 


AP( max X; > A) < EXo. 
O<k<n 


4.17 设 {Xn} 下 下 款 ， 证 明 vA> 0, 
2 
A Xr < 入 } EX, EXo 


4.18 设 {X} 是 操 ， 目 BX, = 0,， EB(X2) < o0. 证 明 VA> 0， 


EX2 


P Xi > A < 一 一 一 一， 
A 


( 提示 : 对 Yec > 0, {(X, 十 c)>} 是 下 蒜 ， 利用 最 大 不 等 式 ， 对 vA> 0, 





i Xx > A} < ro +0) )>(X+e)}< 


再 选 c 使 上 不 等 式 右边 最 小 . ) 


4.19 设 {Xi} 对 于 固定 的 和 > 0, 满足 下 {exp( AZn+i| XXX < TYm > 1 


50 三 一 0, Sn = 一 De Xk. 证 明 139 


Plsup(z+ Sn) >D) <e TT), zs<l. 
n>0 
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(提示 : 对 非 负 上 款 {exp( 一 和 (1 一 z 一 5;))} 利用 停 时 定理 ，) 
4.20 设 是 1.v., 对 给 定 的 es> 0, p>0, 有 PP(-e <X<e)=1, BX < 一 pe. 证 明 对 
和 =e Mlog[(1 十 p)/(1 一 p)], 有 
Ele**)<1. 


若 对 {X,}，50 = 0 9, = 亲 "_， Xi, 满足 对 给 定 。> 0, p > 0, 有 
P{—eé 和 K+l < e|X1, KX2,: .py = 15 E{Xnti|X1,. 2 yt < —pé. 


斌 利用 习题 4.19 的 结果 ， 给 出 当 x < 1 时 ， PP (sup,>ol? 十 5%) > 1) 的 界限 . 
4.21 设 {XK} 满足 BX = 0, EBX? < x. 记 65, = Xn. {Sn} 是 关于 {Xi} 的 款 , 证 
明 对 任意 一 满足 0 < 5 < 0411 0， Dn_1 ZLIX?]/ 吕 < x. 的 单调 正 序列 {5,,n > 1} 


5 
P( 到 =0j=1 


Djes Pijf(7) -AiES. 证明 


Pp {nm 
( 提示 : 利用 习题 4.21 的 结果 ) 
4.23 设 {Xi,n > 0} 关于 {Y,,n > 0} 是 英 ，< 是 任意 常数 . 





Dr F(XE) _ 中 二 
Wa 


1. 若 BIXn vecel<+ecc 则 { vcmn>0l 是 下 款 ; 
2. 车 BX+ < 十, 则 {X+,n > 0} 是 下 款 . 


4.24 设 {Xi,n > 0} 关于 {了 7,,n > 0} 是 上 识 . 


1. 知 EIXn Ada| <+%, 则 {Xn 人 cn> 0} 是 上 鞍 ; 
2. 若 BX > 一 >%, 则 {Xi7,n > 0} 是 上 巩 . 


140 


第 五 音 ”Brown 运动 


Brown 运动 (Brown Motion) 最 初 是 由 英国 生物 学 家 R.Brown 于 1827 年 根据 观察 化 
粉 微粒 在 液 面 上 作 “ 无 规则 运动 ”的 物理 现象 而 提出 的 . Einstein 于 1905 年 首次 对 这 一 
现象 的 物理 规律 给 出 了 一 种 数学 描述 ， 使 这 一 课题 有 了 显著 的 发 展 . 这 方面 的 物理 理论 
工作 在 Smoluchowski, Fokker, Planck, Burger, Furth Ornstein, Ublenbeck 等 人 的 努力 下 迅 
速 发 展 起 来 了 . 但 数学 方面 却 由 于 精确 描述 太 困 难 而 进展 缓慢 ， 直 到 1918 年 才 由 Wiener 
对 这 一 现象 在 理论 上 作出 了 精确 数学 描述 . 并 进一步 研究 了 Brown 运动 轨道 的 性 质 ， 提 
出 了 在 Browa 运动 空间 上 定义 测度 与 积分 ,使 对 Brown 运动 及 其 泛 涵 的 研究 得 到 迅速 
而 深入 的 发 展 ， 并 逐渐 渗透 到 概率 论 及 数学 分 析 的 各 个 领域 中 ， 使 之 成 为 现代 概率 论 的 
重要 部 分 . 

Brown 运动 作为 具有 连续 时 间 参 数 和 连续 状态 空间 的 一 个 随机 过 程 , 是 一 个 最 基本 ， 
最 简单 同时 又 是 最 重要 的 过 程 . 许多 其 它 的 过 程 常 常 可 以 看 作 是 它 的 泛 函 或 某 种 意义 下 
的 推广 . 它 又 是 迄今 了 解 得 最 清楚 , 性 质 最 丰富 多 彩 的 随机 过 程 之 一 . 今天 ，Biown 运动 
及 其 推广 已 广泛 地 出 现在 许多 纯 科 学 领域 中 ， 如 物理 ,经 济 ， 通 讯 理 论 ， 生 物 , 管理 科学 
与 数理 统计 等 . 同时 ， 由 于 Brown 运动 与 微分 方程 (如 热传导 方程 ) 有 密切 的 联系 ， 它 又 
成 为 概率 与 分 析 联 系 的 重要 渠道 . 在 这 一 章 里 ， 我 们 仅 对 Brown 运动 作 一 简要 的 介绍 . 





$ 5.1 随机 游 动 与 Brown 运动 的 定义 


让 我 们 考虑 在 一 直线 上 的 简单 的 ， 对 称 的 随机 游 动 、 设 质点 每 经 过 一 单位 时 间 At 
随机 地 以 概率 p= 3 向 右 移 Az > 0 单位 ， 以 概率 4 = 3 向 左 移动 一 个 Az 单位 ， 且 每 次 
移动 相互 独立 ， 记 : 

| 第 i 次 质点 向 右 移 动 
-1， 第 i 次 质点 向 左 移动 


大 X(t) 表示 t 时 刻 质 点 的 位 置 ， 则 有 : 


X(t) = Az(X1+X2 十 :十 天 过]) 


At 


其 中 ， [5] 为 不 超过 5 的 最 大 整数 . 
显然 ，BX; = 0, DX; = BX? =1, 故此 时 : 
t 


EX(t)=0, DX(t)= (Az). [a 
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以 上 简单 随机 游 动 可 作为 微小 粒子 在 直线 上 作 不 规则 运动 的 近似 .实际 粒子 的 不 规则 运 
动 是 连续 进行 的 .为 此 ， 我 们 考虑 让 At 一 0 的 极限 情形 ， 由 物理 实验 得 知 ， 当 At 越 
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小 时 ， 每 次 移动 Az 也 越 小 ， 通 常 有 At 一 0,Az 一 0. 而 且 在 许多 情形 下 ， 有 Az = 
c. VAt(c > 0 为 常数 ). 因此 ， 我 们 下 面 先 假定 在 Az = c+ VAt 的 条 件 下 ， 推 出 其 极限 情 
形 . 

显然 ， 当 At 一 0 时 ， BX(t) 二 0, 而 


; . ; 2[ 志 | .2 
lm DX(t) = lim (Az) re iim e? At] = C ,二 


男 一 方面 ， 六 (1) = Az(Xi 十 Xz 十 … 十 [加 eh i spn 因 

















而 它 是 独立 增 量 过 程 ， 即 X(t ) 看 作 是 由 许多 微小 的 相互 独立 的 随机 变量 X(t X(ti-1) 
组 成 之 和 . 故 当 At 一 0 时， 由 中 心 极限 定理 知 ，X(t) 经 标准 化 以 后 ， Be 
准 正 态 分 布 ， 即 
若 Vz E 玉 .t > 0,B(z) 为 标准 正 态 函 数 ， 有 
[ 专 ] 
Arz. Xi 一 0 
tm? 和 <z? = P(r). 
等 价 于 dim ,P{ 关 A TR 对 = G(r) 三 谨 . 放 、 e- 和 所 du. 
故 X(t 4) 趋向 正 态 分 布 即 : 
At 一 0 时 ， X(t) ~ N(0,c2t). 


有 了 上 述 由 简单 随机 游 动 的 极限 来 描述 的 质点 在 一 维 直线 上 作 不 规则 运动 的 直观 数 
学 描述 ， 就 可 以 引出 以 下 的 定义 . 
定义 1 若 一 个 随机 过 程 {X(t),t > 0} 满足 


X(t) 是 独立 增 量 过 程 ; 
2° Vs,t >0,X(s+t)—X(s) ~ N(0,ct), Wh X(s 一 X(s) 是 期 望 为 0, 方差 为 c2t 


3 ”X(t) 关于 上 是 连续 函数 . 

则 称 {了 X(t),t > 0} 是 Brown 运动 (BM) (或 Wiener Process). 

事实 上 定义 中 的 3”， 可 由 定义 中 的 1”，2” 推 出 ， 因 此 {X(t),t > 0} 只 需 满足 
1”，2” 即 可 判定 为 BM. 但 为 略 去 不 重要 的 证 明 及 应 用 的 方便 ， 我 们 将 3 ”所 描述 的 
性 质 放 进 定义 中 . 

当 c 二 1 时 ， 称 {X(t),t > 0} 为 标准 Brown 运动 , 此 时 若 X(0) = 0, X(t) ~ N(0,t). 

Brown 运动 一 般 简 记 为 BM. 下 面 我 们 仅 讨 论 标 准 BM 的 情形 ， 记 之 为 {B(t),t > 0}. 
它 在 t 时 刻 的 概率 密度 函数 为 : 142 




















fi(z) = ce- 拉 ， (5.1.1) 


5.1 ”随机 游 动 与 Brown 运动 的 定义 
下 面 讨论 B(t) 的 联合 分 布 及 其 重要 性 质 . 


1，B(t) 的 联合 概率 密度 

先 回 顾 一 下 随机 向 量变 换 的 重要 公式 : 

设 开 = (Xi1,XX2,… ,Xn) 为 n 维 随机 向 量 , 其 概率 密度 函数 p.df. 为 f(x1, 22,… ,zn). 
现 有 Y= gi(X1, 久 2,… ,站 n)(i 二 1,2,…,n) 是 了 的 函数 ， 且 存在 唯一 反 函 数 X; = 
(六, 了 (= 1,2,… ,n). 如 果 gi, hi 有 连续 偏 导 数 ， 则 了 = ( 坟 , 二,… , 训 ,)( 其 中 
Y= gr(X1, 久 2,… ,Xn)) 的 概率 密度 函数 p.d.f. 为 : 


jz1Z2， sd) | 了 7 若 y1,Y2,…: ,Yn 是 g1,92,…… ,gn 的 值 域 ， | 区 0. 
gly1,Y2, on) = 











0， 其 它 . 
(5.1.2) 
这 里 
Ti = hi(y1, yas Yn) (1 <i<n) 
其 中 7 为 坐标 变换 的 雅 可 比 行列 式 ， 即 
arl Or .Or 
Oy1 Oy2 Oyn 
三 
相交 访 ON A OTn 
Oy1 Oy2 Oyn 
由 B(t2) 一 B(t1) ~ N(0,ts 一 三 ), 知 其 概率 密度 函数 p.df. 为 : 
1 22 
p(x,ts —t1)= a Dt 二 让 (5.1.3) 


有 了 上 述 的 结论 ， 我 们 讨论 下 面 的 定理 . 
定理 5.1.1 设 {B(t),t > 0} 为 标准 BM, 则 当 B(0)=0 时 ，V0 <ti<ts < <tn, 


nn 
g(P1, 02 ,Pniti, ta ,tn) = [Le: — il;ti — ti-1) (5.1.4) 
生生 


其 中 
p(x, ) = bl ge 


令 Xo 二 0, to 一 0. 
证 : 证明 的 思路 是 利用 BM 的 独 妆 增生 性 
今 


Yi 二 B(t1),Y; 二 B(t;) bes B(t;i_1),2 < 2 < 7 
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则 | 
B(ti) = 》 Yi. 
= 


由 BM 的 定义 知 Yi,Y,- ,Yn 相互 独立 ， 瞪 Y; et N(0,t; —ti-1), 则 其 联合 概率 密度 











了 
1 pa Vi 
f (Yi1, V2 Yn) -了 [ 2 5207 








的 联合 概率 密 度 函 数 为 : 


90Z1,22， ,ni tt ,tn ) 二 Jp ,Yn )|7| 








其 中 : 
1 0 0 0 
—1] 1 0 0 
上 0 -1 1 0 det|J| = 六 
0 0 0 一 1 1 
故 
9(Z1， a Pi, t2， 只 证 汪 jh) 
(2 Ti 1)? 
-1 a 2 te) ) 
| 口 


由 上 述 定 理 很 容易 得 出 ， 在 B(t1) = zo 的 条 件 下 ， B(t2) 的 条 件 概率 密度 函数 为 : 





(2 一 2 = p(z — zo,ts —t1). 





1 
p(t2 —t1lz0) = = = ex 
plz, 1|zo) 二 p{ Bh 


同样 ,在 B(to) = zo 下 ， Blto 十 t) 的 条 件 概率 密度 为 : 





1 了 
(0 二 =) 三 TD Ce (5.1.5) 
所 以 
P(B(to 二 ) > zo|B(to) = 2Z0) P(B(to 十 如 < zo|B(to) -= £0) 了 
14 2 


上 式 表明 ， 给 定 初始 条 件 : B(to) = zo, 对 于 任意 的 上 > 0,Brown 运动 在 to +t 时刻 的 位 
署 高 于 或 低 于 初始 位 置 的 概率 相等 ， 均 为 #. 此 即 Brown 运动 的 对 称 性 . 





由 于 B(ti;) = Dy 丈 , 故 可 以 利用 前 面 引入 的 随机 向 量变 换 的 概率 密度 公式 ,得 B(t1), B(t2),…… 


Bl(t,) 


5.1 ”随机 游 动 与 Brown 运动 的 定义 


容易 验证 ， p(z,t|zo) 满足 下 列 偏 微 分 方程 : 
Op 102p 
Ot 20z? 
2(z,tlzo) 有 时 称 为 转移 概率 函数 ， 表 示 to 从 zo 状态 出 发 ， 经 t+ 时 间 后 转移 到 状态 > 附 


近 dz 邻 域 的 概率 近似 为 plz,tlzo) . dz. 于 是 : 


yy 
POB(to tt) SBto) = 80)= 人 plateod 





(5.1.6) 


由 (5.1.5) 易 知 ， 
vi>0, Pl(B(to+t)> zolB(to)= zo0) = P(B(to +t) < zolB(to) = zo) = 


这 个 是 质点 每 次 向 左 向 右 作 等 可 能 随机 游 动 的 直接 结 
以 上 我 们 讨论 了 BM 的 联合 概率 密度 ， 下 面 ， 进 一 步 讨 论 它 的 重要 性 质 . 


1 
5 


2. Brown 运动 的 马 氏 性 

由 BM 是 独立 增 量 过 程 以 及 (5.1.4) 式 可 得 以 下 结论 . 

(1) 正 向 马 氏 性 

vi < t2 <… < 在 给 定 Bt ,Bt 下 ，B(t,) 的 条 件 概 率 密度 函数 与 只 
给 定 B(t,_1) 下 B(t,) ) 的 条 件 概率 帘 度 相同 (参考 练习 题 5.1.5). 

(2) 道 向 马 氏 性 

vi > to > … > ,在 给 定 B(t1),…,B(t_1) 下 ， B(t,) 的 条 件 概率 密度 函数 与 只 
给 定 B(t,_1) 下 B(t,) ee 

(3) 中 间 关 于 两 边 的 马 氏 性 

Yi <t<… < 机 及 1<i<n 在 给 定 B(t1),…,B(ti-1),B(tiri),…,B(tn) 下 ， 
B(ti) 的 条 件 概率 密度 函数 与 只 给 定 B(ti_1), B(tit1) 下 B(ti) 的 条 件 概率 密度 相同 ， 

特别 是 在 给 定 B(t1) 与 B(t3) 下 ， 去 求 B(t2) 的 条 件 概 率 密 度 ， 结 果 会 怎样 呢 ? 
先 看 看 取 t1 = 0,ts=1,t=t,0<t<1 的 情形 ， 由 式 (5.1.4) 知 在 B(0) = 0 下， 

1) 的 联合 概率 密度 函数 为 : 


1 1 
f(s = ww 31 





ee B(1) 的 概率 密度 为 f(y) = [一 3]. 从 而 在 B(0) = B(1) = 0 下 ， 











t) 的 条 件 概 率 密度 为 
1 1 2 
0 
仍 为 正 态 分 布 ， 可 以 看 出 145 


E[B(t)|B(0) = B(1) = 0 =0, E[B*(t)|B(0) = B(1) = 0 =t(1—t). 
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对 于 更 一 般 的 情形 ， 我 们 有 以 下 : 


定理 5.1.2 ee 
率 密 度 是 一 正 态 密度 ， 其 均值 为 | (b a) t t1)( 


0) = 0, 则 B(t) 的 条 件 概 
FD—a)(t—ti)(t2—t1)- 
证 由 


1, 方差 为 (to 一 t)(t 一 t1)(t2—t1)-! 





B()B(t1) = a, Bl(t2) = 7) 


=E[B(t) — B(1) + B(H)|B(i) -Bow Bt) 一 Bt) 一品 
se 
(t—t1) 


这 五 
本 (ft)(ty ty) /Ee a)—0+a 


=(t—t1)(t2 —t1) 





(b—a)+a 
为 求 条 件 方差 ， 先 求 相 应 的 条 件 p.d.. 
B(t1), B(t), B(t2) 的 j.p.df. 为 

人 1 ,人 ,人 > 全 _1.21 (和 一 21)2 (za 一 了) 
2 (27) [lt(t —t1)(to — t)]? ?1 3 * 








1 1 
f(z1, 22) = ant ts Pt al 


2) =5 下， B(t) 的 条 件 pdf 为 


f (£1, DZ2 
fB(B()=a.B(ts)=0 (2|4.b) = 


De 
f(z1, 73) Ti1=4,T2= 





故 在 B(t1) 二 a， B(t 











1 (2—a)? (b—2) (b— a) 
SO 
得 : Var(B(t)|B(t1) = a, B(t2) = 0) = [(t -ti)(ts 一 四 (ta —t1)-1] 
于 是 
1 
1 _， Pi(Za.D : 
Ua 二 (2 An)3[(t ti1) )(t2 —t)(t2 一 t1)-1]3 
Sl ee eh 
1 (t—ti)(t2 —t)(t2 —t1)-1 } 
知 E(B(t)|B(t1) = a, Bl(ts) = Db)=a+ 下 (ba), B(t) 在 B(t1)=a,B(t 
概率 密度 函数 仍 为 正 态 分 布 . 


2) = 下 的 条 件 














3. 正 态 过 程 


5.1 ”随机 游 动 与 Brown 运动 的 定义 


首先 给 出 定义 : 

定义 2 随机 过 程 {X(t).te€ 7T}, 阁 对 任意 ti ET,i=1,2,… ,nn, X(t1), X(t2),… (如 ) 
的 联合 分 布 为 n 维 正 态 分 布 ， 则 称 {X(t),t e T} 为 正 态 过 程 . 

由 定理 5.1.1 可 知 Brown 运动 是 正 态 过 程 . 并 且 有 以 下 结论 

定理 5.1.3 设 {B(t),t > 0} 是 正 态 过 程 , 轨道 连续 ，B(0) = 0,Vs,t>0, 有 EB{B(t)} = 
0, B[B(s)B(t)] =t 信 s, 则 1{B(t),t > 0} 是 BM, 反之 亦 然 ， 

证 明 ” 先 证 充分 性 

由 定理 5.1.1 知 ， 若 B(t),t < 0} 是 BM, 则 它 是 正 态 过 程 ， 同时 由 Brown 运动 定义 
知 ， 恕 B(t) = 0, 且 轨 道 连续 . 设 0<s<t, 则 














E[B(s)B(t)] =E[(B(t) — B(s) + B(s))B(s)] = E[(B(t) — B(s))B(s)] + ELB*(s)] 
=B[B(t) — B(s)]. E[B(s)] + s=s 


所 以 
E[B(s)B(t)| = s At, BIB(t)] = 0. (5.1.7) 

充分 性 得 证 . 

再 证 必要 性 

当 {B(t),t > 0} 是 正 态 过 程 ， 且 满足 (5.1.7) 式 时 ， 那 么 Vs,t > 0, 有 

EIB(t)— B(s)] = E(B(t))— E(B(s))=0 
E[B(t) — B(s)]” = E[B*(t)] + ELB’(s)] ~ 2E[B(t)B(s)] 
=t+s—2(tAs)= lt— sl. 


而 Ysi1 <t1 ss<to, 有 


El{B(t1) — B(si)}{B(t2) — B(s2)] 
=B[B(t1) B(t2)] ~ BLB(t1)B(s2)] — BIB(s1)B(t2)] + BLB(s1)B(s2))] 


一刀 一 如 一 81 十 sS1 二 0 


再 由 正 态 分 布 知 不 相关 即 相互 独立 , 得 : B(t) 是 独立 增 量 过 程 . 且 B(t)-B(s) ~ N(0,1t— 
s|), 又 {B(t),t > 0} 轨道 是 连续 的 ， 得 {B(t),t > 0} 是 BM. 定理 得 证 . 

由 这 个 定理 我 们 就 得 到 了 判断 一 个 正 态 随 机 过 程 是 否 为 Brown 运动 的 充分 必要 条 
件 ， 从 而 得 出 一 系列 很 有 用 的 结论 . 

定理 5.1.4 设 {1B(t),t > 0} 是 Brown 运动 ， 则 

1° {B(t+7)— B(T),t>0}),vr> 本 地 

站 {去 B02,1 > 0}.A>0, 

3。 {1B(4),t>>0}, 其 中 {tB(#)}i=0 会 0} 
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4° {B(T=5)- BT),0<S<T}T>O. 

仍 为 Brown 运动 . 

证 明 证明 的 思路 就 是 利用 定理 5.1.3 的 结论 . 

1” 由 正 态 分 布 的 性 质 知 : 

因为 {8(),t > 0} 是 正 态 过 程 , 所 以 {B(t 十 7) 一 B(7),t > 0} 仍 为 正 态 过 程 ，Yr > 0， 
且 B(0+7)— B(7)=0. 

vt >0, EIB(t+7)— B(7) = E[B(t +7)| — EIB(7T)| = 0， 





E{IB(t+7)— B(T)[B(s+7)— B(7)]} = BIB(t+7)B(s+7)—7—7T+7 


二 (t+7T)A(s+7)—7T=sA 人 t+T—T=sAt. 


满足 定理 5.1.3 的 条 件 ， 所 以 {B(t 十 7) 一 B(7).t > 0} 是 Brown 运动 . 
2”，3”，4” 的 证 明 与 上 完全 类 似 ， 不 再 蒙 述 . 
至 此 ， 我 们 已 研究 了 不 少 Brown 运动 的 重要 性 质 和 定理 . 那么 ， 它 和 我 们 上 一 章 重 
点 讨论 的 款 有 什么 关系 呢 ? 这 是 一 个 很 有 价值 的 问题 . 














4. Brown 运动 的 蒜 性 
由 第 四 章 连 续 参 数 著 的 定义 可 得 以 下 结论 . 
定理 5.1.5 设 {1B(t),t > 0} 为 Brown 运动 ， 则 





1° {B(t),t> 0}, 2° {fe*B(WO-3Nt + > 0)}, 

3° {Bt) -tt>0}, 4° {eMBOTINt + > 0). 
都 是 加 . 
证 明 ( 略 ， 留 作 练习 ). 
由 以 上 绪论 可 知 ， Brown 运动 本 身 既 是 马 氏 过 程 ， 又 是 连续 巩 . 这 个 结果 很 别致 ， 
但 并 不 奇怪 因为 我 们 分 别 讨论 的 Poisson 过 程 ， Markov 链 ， 蒜 ， Brown 运动 等 随机 过 
程 ， 不 过 是 对 一 些 随 机 过 程 某 些 方面 的 特殊 性 质 进 行 了 专门 的 、 分 类 的 讨论 ， 而 并 不 排 
斥 这 些 性 质 可 以 交叉 ， 可 以 共存 于 一 个 随机 过 程 中 .在 介绍 这 些 概念 时 只 能 “ 串 行 ” 进 
行 ， 但 实际 上 要 能 够 “并 行 ” 应 用 ， 融 会 贯通 . 

当然 ， 这 个 定理 还 给 出 了 由 Brown 运动 构造 蔷 的 方法 ， 很 有 使 用 价值 . 





$ 5.2 Brown 运动 轨道 的 性 质 
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本 节 将 通过 以 下 几 个 命题 来 研究 Brown 运动 轨道 的 性 质 . 
以 下 均 设 {B(t),t > 0] 为 标准 Brown 运动 ， 且 B(0) = 0 


62 Brown 运动 轨道 的 性 质 


定理 5.2.1 对 给 定 的 上 > 0, 有 
Plw : lim YB(LH— B(OH) =0)=1 (5.2.1) 
、 “he 
证 明 vt > 0( 固 定 ), 令 Wh = (B( 去 ) 了 (7 去,1 <k< 2", 则 EW = 
0, BW2, = 2t2/22". 由 契 比 雪夫 不 等 式 ， ve > 0 





St 


2t 


a Wr > ): < > 
22 
因 > 1(1/2)” < cx, 由 Borel 一 Cantelli 引 理 ， Ye> 0 


:人 人 ce- 





(1/2)". 





itnst hs} 
即 
on 
lim P (wm > 9 二 
-2% 2 
故 
pe k— 
Plw: lim 2,(B(t) — B(— pT Ey 三 办 三 1 
k=1 ， 
定理 得 证 . 口 
定理 5.2.2 
2 k hl1 
Pl(w im 13( 志 )- B(— I= ~%)=1 (5.2.2) 
k=1 
证 明 记 


4= 世 :1(B( 盐 上 一 有 (区 ))2 2 )}, 
B= {o :maxl<k<an{|B( 去 四 一 瑟 ( 写 1) 一 0， 
= {o:lim -oo Dh-1|B( 才 全- B( 每 1)| = o0}. 
RN .2.1 知道 : P(4) = 1; 又 因 B(t) 轨道 以 概率 1 连续 ， 所 以 可 以 证 明 极 大 值 函 数 
imnaxi<h<an{lB( 去 直 一 了 (于 区 | 在 闭 区 间 [0,4 上 以 概率 1 一 致 连续 ， 所 以 P(B) = 1; 又 




















B( = k—1 
ip( 0) < ;也 屿 ， 1B( 子 - BC 1p - 一 30- 
所 以 _ 149  ， 
2 k kl1 D1(B(ED) 一 B(St))? 
B(—t)-B > ee (Bt - 
2 (mn ) 人 2" ) 加 maxi<x<2n{B( 去 a 2n +t)|} | | 





当 nn 一 > 时 ， 对 任意 w < 4B， 








和 k 8 一 1 、。 k 六 者 
2B) B(-E 0) mt {BB 0 
故 由 (*) 式 





从 而 we C, 所 以 ABCC. 

而 P(4) = P(A4B)+P(A4B),0 < P(A4B) < P(B)=1-P(B)=0, 故 P(4B)= P(4) = 
1. 所 以 P(C) = 1, 从 而 (5.2.2) 式 成 立 . 口 

定理 5.2.2 说 明 对 + 在 任意 区 间 上 ， 对 几乎 所 有 的 w,Brown 运动 B(t,w) 关于 不 是 
有 界 变 差 函数 . 

固定 t+>0, 设 0=t0<<...< 机 =t, 记 入 = mazicren(tp 一 ty-1). 则 有 以 下 结 
论 : 

定理 5.2.3 


mm 


是 2 Bp) Et (5.2.3) 


证 明 要 证 明 以 上 命题 ， 只 需 证 明 lim、_,o Blt_1(B(ty) 一 B(tr-1)) 一 本 =0. 为 此 
计算 EB[5Dx_1(B(ti)— B(tr-1))?—t]. 
记 防 = B(ty) 一 B(tr-1) (1 <h<n), 芍 于 ~N(0.ty 一 款 -1): 由 正 态 分 布 的 性 质 知 
Vi = 3.(tr— tr), BY? = DY =ty tl: 叉 了 (1 <k<n) 相互 独 立 ， 故 当 庆 六 1 
时 ， EY2Y? = EY? BEY? = (ty — tii)(ti tii1), 因此 : 


BID (at - BO) t= BD YE t= BODIE) 2B) YE + 
天 三 出 天 二 1 jh 
= 3. Dt 一 不- 和 十 2 Dt) 2 t+ 
Cg = 
= yw 3 tr_1) 
A 二 1 


因为 DR 一 1)? < 和 Di(tr 一-_1) = At, 所 以 当 和 一 0 时 ， 








na B(tr_1))* —#]* — 0. 
故 limao D2_1(B(t) — Bl(tr_1))? "et. 口 
理 5.2.4 
定理 5 150 
中 < nN.8, I < 
Nr 2 Bin- Bi) 一 Btp-D) "< 5B°(t) — 3t (5.2.4) 


5.2 Brown 运动 轨道 的 性 质 
ER 人 
DB) = Bs) 3B(D)+st (5.2.5) 


证 明 令 4 = Dx_1B(ti)(B(ti) 一 再 (不 -DC = Dr Blty_ (Bt) — B(ti_1)) 
(nee), 则 


Rn Rn 


An + Cn = (Br) + Bltp-i)(B(tr)— Bltr-1)) = > (BI(ti) — BI(tr-1)) = Bt) 


涉 二 于 k=1 
由 定理 5.2.3 得 An — Cn = Di(B — B(t:- 1))? tA = 0). 故 4 = B2(t ) 一 Ch. 而 
由 均 方 收敛 的 定义 知 : lims ,0 oe A = 0， 所 以 lima_,o E(B? (t)— 20%— es 0, 


所 以 limn ~ ElIC,, ($B2(t) 一: $t)]? = ee 0. 由 此 可 得 


el B(tr_1)( Bi) 一 BID) 一 ( 





(5.2.4) 式 成 立 ， 同 理 可 以 证 明 (5.2.5). 
对 定理 5.2.4 我 们 有 更 一 般 的 形式 . 
定理 5.2.4a 











， ee 1 
Ue i -tr-n)(B(t) — Bltn-1) "< 3B°(t) — 3(20— 1)t (5.2.6) 


其 中 0<60<1. 

证 明 提 示 : Dx_1 B(tr_1+0(tp—tr_1)(B(ti)—B(tp_1)) = $1{B’(ti)—B?(tr -1)+ 
[B(tr_1 + O(tr — tr_1)) — Bltr_1)]* — [Bl(tr)— B(tr_1+0(tr — tr_1))]}. 

定理 5.2.5 Brown 运动 {B(),+ < E+].Wt > 0, 几乎 对 所 有 轨道 都 没有 有 限 的 导 
数 . 

证 明 先 考 虑 t+>0 的 情形 . 

如 果 B(t) 在 t 可 导 ， 则 所 E ,对 充分 大 的 n%, 令 盖 ni 十 1, 只 要 i<j<i+3( 也 
就 是 说 ， 一 2 十 t< 人 与 : <2<t+ 二 ), 则 有 





令 D; = {w:B(t) 在 t>0 可 导 }, 则 有 


n++l1 dl 


D=(jpcl)NN UY 门 1 过 )- 5) < 二 }sT， 


t>0 I>1n21 i=1 j=itl 
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Yl >> 1, 由 Brown 运动 的 增 量 独立 性 ， 得 





?十 3 




















一 1 1 wf 1 
PC (| {IB(2 一 一 )| < 二) =(PUN(0.=)| < 二) 
于 (0 nN A 
了 一 :十 1 
机 1 3 
=(PIZ| < mm 
<( na 
因此 
nn 二 1 i+3 = 1 . 1 :和 | 
lim A 门 {|B(2 sa) < lin) =0. 
j=i+1 
所 以 
?十 1 i+3 n+l ?十 3 | 1 
PNU NN {a 二 <) < PO f) {1B(D) -BTT) < 2 
n>11=1 7=i+1 i=1 j=i+1 
n+1 i+3 三 时 1 
< lim a ee 
=0. 
故 
ni+l1 ?十 3 7 一 1 1 
P(D r)< > P(N U (YN {tats B( 一 一 )|< 二 ) = 0， 
I<1 n>1i=1 j=i+1 总 
当 + 上 = 0 时 ， 考 虑 右 导数 ， 类 似 可 证 . 至 此 命题 得 证 . 口 


通过 以 上 定理 ， 可 得 Brown 运动 轨道 有 以 下 性 质 : 

(1) 对 任意 给 定 的 小 区 间 ， 几 乎 对 所 有 的 轨道 w, B(t) 关于 + 都 不 是 有 界 变 差 函数 . 
(2) 对 任意 的 上 > 0, 几乎 对 所 有 的 轨道 w,B(t) 关于 + 都 没有 有 限 的 导数 . 

(3) (5.2.6) 右边 和 式 ， 当 取 不 同 的 9 时 ， 其 均 方 极限 也 不 同 . 


$ 5.3” 首 中 时 与 最 大 值 (Hitting Time and Maximarn Value) 


在 这 一 节 里 我 们 将 讨论 Brown 运动 中 的 首 达 时 间 ( 首 中 时 ) 的 分 布 及 过 零点 概率 的 
反正 弱 定 理 ， 

首先 我 们 来 看 看 何 为 首 中 时 . 

设 {B(t),t > 0} 为 标准 Brown 运动 . 不 妨 设 BY) = =0, 令 T= inf{ft:t> 0,B(t)=a), 
则 工 表示 首次 击 中 a 的 时 间 ( 首 中 时 ). 要 研究 P(T, < t) 有 多 大 . 仍 从 讨论 事件 的 等 价 
性 入 手 . 








53 ” 首 中 时 与 最 大 值 (Hitting Time and Maximal Value) 


对 Vt > 0, Mi = max B(w)ocuzt, 表示 [0,t] 上 的 最 大 值 ， 当 a > 0 时 ， 显 然 存在 下 述 
事件 等 价 关 系 : 





{TD < = {Mi > oj. 


则 有 
P(T, < 人 = P(M; >a). 


P(B(t) > a)= P(B(t) > alTa < PP(Ts <t) + P(B(Et) > alTs >t)P(Ta >1) 


3 P(B(t) > alTs >t) =0, 又 由 Brown 运动 的 对 称 性 知 在 (Ts < 的 条 件 下 ， 即 
(T4) =a 时 ，(B(t)> a) 与 (B(t) < 4a) 是 等 可 能 的 ， 即 : 


P(B(t) > alT, <t) = P(B() < alT, <#) 


人 


如 图 5.1.1 所 示 . 故 P(T, <t)=2P(B(t) > 4a). 


Bt) 





于 是 ， 当 a>0 时， 





而 当 a < 0 时， 由 于 Brown 运动 的 对 称 性 ， 显 然 P(T_。< t= P(T, < 加, 所 以 对 一 般 的 
,有 
lal 


P(T, <#t)= 充 |4 53e d= 2 (7). (5.3.1) 


这 就 得 到 了 首 中 时 的 分 布 . 
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由 此 可 以 推 知 两 个 重要 的 结论 : 

1， 人 下 几乎 处 处 有 限 ， 即 P(T < <c) = 1. 因 P(T, < >) = ,li TD 
记忆 “er 全 du=1 

即 a 点 首 中 时 Ti 小 于 无 穷 的 概率 为 1. 

2，ET, = 二 ec. 因 








到 = 人 P(T, >H) dt 


-去 人 Ee a 
Tt 

te- i 
4 








4.- 7 du 
-= 放 5 
20 D 2 有 942e- . du 
一 6 du . 一 二 三 :De 
人 0 > V27 0 2 


所 以 有 ET = ~, 这 时 多 人 么 不 可 思议 ! P(t。 < xx)=1, 而 BT = ~, 不论 a 多么 接近 
初 态 . 不 过 对 比 第 三 章 的 结论 ， 可 以 知道 这 与 离散 时 间 简 单 的 对 称 随机 游 动 B70; = x， 
7 = 1,2,.… 是 完全 一 致 的 . 

以 上 我 们 对 首 中 时 进行 了 讨论 ， 下 面 研究 一 下 过 零点 的 反正 弱 定 律 . 

vti < t2, 记事 件 0(t.t2) = { 至 少 有 一 个 te (ti,t2), 使 B(t) = 0}, 即 在 (ti,t2) 内 至 少 
过 一 次 零点 . 由 全 概率 公式 有 : 





, 和 
Post) = P{0(t1,t2)|B(t1) = x}. yp dz. (5.3.2) 
一 ec cn 


由 Brown 运动 的 连续 性 及 对 称 性 可 知 : 
P(0(t1,t2)|B(t1) = 2) = P(T, < to —t1). 


如 图 5.1.2 所 示 . 


B(t) 
B(t)=x 





53 ” 首 中 时 与 最 大 值 (Hitting Time and Maximal Value) 


将 上 式 及 (5.3.1) 式 的 结果 代入 (5.3.2) 式 ， 便 有 


P(O0(ti,t2)) = I dz， 


进一步 讨论 ， 我 们 将 得 到 下 面 的 定理 : 
定理 5.3.1 记 0(ti,t2) = [在 te (ti,ts) 内 至 少 有 一 个 t, 使 B(t) = 0}). 0(ti,ts)={ 
在 te (ti,t2) 内 没有 一 个 t, 使 B(t) = 0}. 则 


有 目 当 妇 = wt,t2=t,0<xz<1 时 ， 有 
P{0(zt,t)} = > arcsin VE. 
证 明 由 前 述 讨论 已 知 : 
plot) = /PO l=) 入 qs 


en 二 dzye 二 站 站 


-em 


这 个 积分 不 易 求 得 ， 下 面 我 们 另辟蹊径 由 P(T < 力 = 记 fs e- 所 du, 可 得 ZT 的 概 
率 密度 函数 p.df. 为 : 





dP(T, < t) |o| ee a2 
= 一 ee 一 五 。 











9g7. (t) = a 二 一 于 (5.3.3) 
故 PT < 人 = 如 we- 到 du 则 
P(O(t1,ta)) 到顶 PO ,ta)lB(a)= 4) Ee 车 dr 
人 P(Tiz| < ts —t) i dz 


i 一 22 
uu 2€ 2 dule 26 dz 


2 t2 一 t1 
= [| 
如 -各 2 1 1 
有 世 国人 Zexp[ 一 3 【二 本 于 ) dz} du 
a 和 外 ut1 2 ( 工 十 1 ) 和 2 1 1 
rN rh 1 
ah of se d[ 字 (+ 二 四 du 


t2—t1 , 2 
/ 人 














i 





杞 三 在 
U2 
-== /| 1 二 
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令 “ = 了 ao 则 上 式 化 作 











h(ti,t2) 921 dv Vt 2 /Rattitz) di 
P(O0(t1,t2)) = Wy = |/ 
ah v( v(t1 + t1v2) To 1+v2 
2 /t 
二 2 arctan h(t1,t2)=— eo 2 
tz 
其 中 ht,t2) = /所 BL P(0(ti,t2)) 二 1 P(0(t1,t2)) = 2 arcsin / 号. 
了 有 
P(O(zt,t)) = :2 arcsin VE 
T 
上 述 定 理 得 证 . 品 


这 个 过 零点 的 反正 弦 定 律 的 意义 就 在 于 它 揭示 了 上 述 概 率 仅 与 时 间 区 间 端 点 的 比值 
x 有 关 ， 而 与 t 无关， 这 是 个 很 耐人寻味 的 结果 . 





$ 5.4 Brown 桥 (Brown Bridge) 


在 许多 实际 问题 中 ， 往 往 是 在 给 定 初始 t= 0 时 的 和 (0) = z 和 过 程 终 了 如 > 0 时 
X(to) = 的 条 件 下 研究 中 间 过 程 的 情形 ， 即 考虑 {X(t),0 <t<tolX(0) = ,X(t0) 二 由 
的 性 质 . 

在 讨论 标准 Brown 运动 {B(t),t > 0} 时， 设 B(0) = 0, 车 记 


X(t) = B(t)+ w+ {ye B(to)}. 


则 过 程 {X(t),0 < t+ < to} 的 任何 路 径 必 经 过 (0,z) 和 (to,y) 两 点 ， 就 仿佛 两 端 男 定 的 桥 
梁 ， 因 而 称 之 为 Brown 桥 ， 通 过 坐标 变换 ， 总 可 以 将 上 述 简化 为 : 
t 


0 EB(1), XX(0)=0, X(to)=0 


的 情形 . 由 此 引出 下 面 的 定义 . 

定义 1 {B(t),t > 0} 为 标准 Brown 运动 , 不 妨 设 B(0) = 0, 令 Boo(t) = B(t)--tB(1), 
则 称 {B00(#),0 之 t+<1)} 为 Brown 桥 (Brown Bridge). 口 

Brown 桥 在 实际 中 用 途 很 广 ， 下 面 给 出 它 的 基本 性 质 . 

定理 5.4.1 {Boo(t),0 <t<1} 的 分 布 与 {B(),t > 0} 在 B(1) = 0 下 的 条 件 分 布 相 
同 . 

证 明 由 Brown 运动 是 正 态 过 程 及 正 态 分 迹 的 性 质 知 ， Boolt) 与 {B(t),0<t< 
1|B(0) = B(1) = 0} 的 分 布 均 为 正 态 分 布 ， 故 要 想 证 明 这 两 个 分 布 相同 ， 只 需 证 其 一 阶 算 
和 二 阶 矩 均 相 等 即 可 . 


5.4 Brown 桥 (Brown Bridge) 


首先 看 一 阶 甜 : 
ElBoolt)] = EIB(t) ~ 1B(1)] = 0. 





由 $ 5.1 定理 5.1.2 知 ， 当 B(0) = 0 时 ， BIB(t)|8(1) =0]=0,V0<t<1. 知 二 者 的 一 
阶 矩 相同 ， 下 面 讨论 二 阶 矩 ， 


吾 [Bao(t = 吾 瑟 区 一 (= BIB (Ht) +t BLB*(1)] ~ 2tB[B(t)B(1)] 
=t+t .1—2t.t=t(1—t). 
再 利用 $ 5.1 定理 5.1.2 的 结论 ， 知 : 
E[B*(t)|B(1) = 0 =(1-t)(t -0(1-0)-!=t(1—t). 
显然 二 者 的 方差 也 相等 ， 那么 协 方差 呢 ? Y0 < s,t <1, 


Cov[Boo(s), Boo(t)] = E[Boo(s) Boo(lt)] — EL[Boo(s)]. ELBoo(t)] 
=E[B(s)— sB(1)][B(t) ~ +1B8(1)] —0 
=B[B(s)B(t)] 18[B(s)B(1)) — sBIB(1)B()) + stBIB?(1) 


=sA 人 t— st— st+ist. 


不 妨 设 s < t, 则 有 Cov(Boo(s), Boo(t)) = s(1 一 如. 
而 


Coul(B(s), B(#)|B(1) = 0] 
=B[B(s)B(t)|B(1) = 0] ~ BIB(s)|B(1) = 0]: BIB(H)IB(1) = 
=B{E[B(s)B(t)|B(t). B(1) = 0]|B(1) = 0} -0 
=B{B(t) ELB(s)|B(t). B(1) = 0)|B(1) = 0} 
B(t)(s — 0) 


=B{BO0 + SO VB) =) 
=B{B’(t) .71B(1) =0} = 7 BIB*(#)|B(1) = 
2 用 

+t 1—0 = 





可 知 二 者 的 协 方 差 亦 相等 即 二 者 的 二 阶 矩 均 相 同 ， 又 它们 都 是 正 态 分 布 ， 从 而 得 出 结 
论 ， 二 者 的 分 布 相同 . 
值得 注意 的 是 在 证 明 中 我 们 曾 多 次 用 到 了 5 5.1 定理 5.1.2 的 结论 
有 了 上 面 这 个 定理 ， Brown 桥 就 和 Brown 运动 建立 了 直接 的 明确 的 联系 ， 它 就 不 再 
显得 有 些 神秘 .下 面 我 们 看 看 Brown 桥 在 统计 中 的 应 用 . 
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Brown 桥 在 研究 经 验 分 布 函数 中 起 着 非常 重要 的 作用 . 设 X1,X2,… ,,,… 独立 
同 分 布 ，X, ~ V0(0,1), 对 0<s<1, 记 


也 
Na(sj= 》 Taxi<s， 
el 


Nn(s) 表示 前 个 Xi1, 久 2,… ,了 ,中 取 值 不 超过 s 的 个 数 ， 称 请 ,(s) = Nn(s)/n 为 经 验 
显然 ，NV,(s) ~ B(n,s), 则 由 强大 数 定理 ， 有 


P(lim F(s)= s)=1. 





即 了 一 时， 已 (s) 以 概率 1 收 钱 于 s. 事实 上 ， 由 Glivenlko-Cantelli 定理 ， 还 有 更 强 
的 结果 . 即 了 一 se 时 ， 五,(s) 以 概率 1 一 致 地 收敛 于 s. 


P{lim( sup |F(s)—s|)=0}=1. 
和 一 De 0<s<1 


同时 若 令 Qn (s) = = Vn(D, n(s)— 3). 
则 Bon 





由 中 心 极限 定理 ， 对 任意 x : 


1 Tr 3 
lm Plan(s) < £) = | ce 一 50 du, 
27s(1 一 5) /一 -= 


这 个 式 子 似曾相识 ， 进 一 步 研究 会 得 到 奇妙 的 结果 . 

0<s<1} 在 n 一 x 时 的 极限 特性 . a 注意 到 Vs < 
在 给 定 N,(s) 下 N,(t s) 的 条 件 分 布 恰好 是 参数 分 别 为 n 一 Ni(s) 与 (1 一 s)/(1 一 3s) 
的 二 项 分 布 , 即 hn 的 一 Na(a)) 的 条 华 分 布 为 B{n 一 NN 全}. 故 由 中 心 极 
限定 理 知 ，an(s) 与 an(t) 的 联合 分 布 , 当 一 > 时 , 趋向 二 维 正 态 分 布 . 类 似 的 理由 断定 
{an(s),0 < s < 1} 的 极限 过 程 是 一 正 态 过 程 . 前 面 已 得 Blau(s)) = 0, D(an(s)) = s(1-s), 





5.5 Brown 运动 的 各 种 变形 与 推广 


故我 们 只 需 计算 协 方差 就 可 以 掌握 其 全 面 性 质 .对 0<s<t<1, 有 
Cov(an(s), on(t)) = Elon(s)on(t)] — Elan (s)]E[an (t)] 
=n. BE{[F,(s) — s][F,(t) —]) -0 
= 二 . BIN,(s) Na (AO) — ntB[F,(s)] —n. sB[P,(t)] + nst 
= E[B(N,(s)Na(t)IN, (0))] — nst 


=— + ELIN,(t)E(N,(s)|N,(t)] — nst 





= . E[N,(t). EN (t) — nst 


5 


二 (nt+n(n—1)t)] — nst 


=s(1—t). 


则 {an(s),0 < s<1} 当 nn 一 时, 其 极限 随机 过 程 是 均值 为 零 ， 协 方差 为 s(1 一 t) 的 正 
态 过程 ， 而 这 正 是 我 们 前 面 着 重 研究 的 Brown 桥 ! 真是 得 来 全 不 费 工夫 1 

以 上 是 在 Xi1, 久 2,… ,了 Xm,"… 为 [0, 1] 上 的 均匀 分 布 情形 下 讨论 的 ， 它 可 以 推广 到 一 
般 分 布 . 设 XXX , 久 ,,…… 为 相互 独立 同 分 布 的 随机 变量 ， F(x) 为 其 概率 分 布 函 
数 ， 则 随机 变量 F(X;) ~ UV(0,1). 此 时 记 


n 
Nn(s) > {X1, X2, ea ,Xi 中 下 (XX;) < s 的 个 数 } > Darnesy. 
i 


令 页 (= Nn(s)/n, 考虑 Vnisups |(X) 一 F(X)| 的 极限 分 布 . 
设 mm(s) = VAR(F,(s) —s). 
于 是 {Qn(s),0 < s < 1} 的 极限 过 程 是 Brown 桥 ， 即 对 任意 的 a, 有 


na P{Vnsup IFa(z)— PF(2)| < a} = ue 120b0 < a} 


此 处 ，{2(t) = B(t) 一 4B(1),0 <t<1} 为 Brown 桥 . 
我 们 对 Brown 桥 已 成 竹 在 胸 ， 从 而 上 述 统 计 间 题 便 可 迎刃而解 . 


$ 5.5 Brown 运动 的 各 种 变形 与 推广 


这 一 节 我 们 介绍 由 Brown 运动 导出 的 各 种 变形 及 推广 . 
1 在 某 点 被 吸收 的 Brown 运动 159 
B(t), Bt < 全 


,其 中 TT = min{t:t> 0,B(t) = 2}. 
光 ， t > 7 


| 
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{2( 如 ,t > 0} 表示 一 旦 随机 过 程 第 一 次 击 中 z 后 即 被 吸收 停留 在 x 状态 ， 称 为 在 z 
点 被 吸收 的 Brown 运动 . 

注意 到 2(t) we 为 求 Z(t) 的 分 布 , 再 次 利用 Brown 运动 的 对 称 性 ， 
不 妨 设 z > 0, 分 情况 讨论 t) < y): 

当 y>z 时 ，P(2(t) < ee =1, 

当 y=z 时， P(2(t)} = 7x)= P(T, <t)= A Ee 人 dau, 

当 y < z 时 的 情况 比较 复杂 首先 进行 事件 分 解 ， 显然 存在 下 列 事件 等 价 关 系 : 


(Z(t) < y= (Bt) < y, 人 闪 





得 (2(t) < vy)={B(t) < vy}— {B(t) < vy, maxocsct B(s) > 2} 
则 P(Z(t) <y) = P{B(t) < y} — P{B(t) < y,maxocsct B(s) > 2} 
而 
B(t) < y, wa, B(s) > xz) = P{B(t) < yl 有 az B(s)> 2}P{! max, B(s) > 72} 


= PIB() > 20 ~ yl peg Ble )> o}P {goes, Bl Re 


上 述 概率 相等 的 理由 是 ， 事件 (maxo<s<t Bl(s ) > 2 注 (T, < t), ), 而 在 (Tr < t) 发 生 的 条 





图 5.4.3 


件 下 ，(B(t) < vy) 发 生 ， 当 且 仪 当 B(s) 在 s= TT 到 达 zz 后 , 在 (1 一,) 的 时 间 内 至 少 下 
降 了 (z 一 v). 由 对 称 性 ， 此 事件 的 条 件 概率 等 于 它 至 少 上 升 了 (z -vy) 的 概率 即 等 于 在 
(ZT < 发生 的 条 件 下 ， 事 件 (B(t) > 2z -一切 发 生 的 条 件 概 率 ， 如 图 5.4.3 所 示 . 于 是 


P(B(t) < 站 加 之 £) =P(B(t) > 22 —Y, aas, Bls) > 2) 





=P(B(t) > 27 — y). 
所 以 
PLZ(0 < 人 = PUB 七 A >2 


22 一 
=P(B(t) <vy)— P(B(t) <y— 27) 人 -家 du. 
y— 
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可 见 对 于 不 易 求 得 的 概率 分 布 可 以 通过 事件 分 解 和 分 析 来 逐步 解决 . 
至 此 ， 我 们 已 得 出 在 > 点 吸收 的 Brown 运动 的 概率 分 布 为 : 


P(Z(t) <Y)=1, 当 y > xz, 
=2)= Fr edu, 当 二 名 


P(Z(t) < vy)= J -ae 守 du， 当 y < z. 





2 、 在 原点 反射 的 Brown 运动 
令 了 Y(t) = |B(t)|, 则 称 {Y(t),t > 0} 为 在 原点 反射 的 Brown 运动 . 我们 研究 其 分 布 
律 P(Y(t) < y 为 多 少 . 显然 ， 当 yy < 0 时 ， 





当 y>0 时 ， 
P(Y(t) < vy)= P(BG)| < vy)= P(-y < B() < yy) 
=2P(B(t) < y) - = 款 "awl. 
TJ 
这 样 就 得 到 了 它 的 分 布 . 


3 、 儿 何 Brown 运动 

令 到 (t) = e309, 则 称 {W(t),t > 0} 为 几何 Brown 运动 . 

几何 Borwn 运动 有 时 可 以 作为 相对 变化 为 独立 同 分 布 情况 的 模型 ， 例 如 ， 设 YY) 
是 n 时 刻 商品 的 价格 ， Te = 已 mn > 1) 是 独立 同 分 布 的 ， 如 取 Yio) = 1 Ya) = 
XX 2) X00)， 则 当 n 一 x 时 ， 根据 中 心 极限 定理 知 ， 
{ln¥),n >1} 渐 近 为 Brown 运动 .于 是 {Yn > 0} 就 近似 为 几何 Brown 运动 . 

取 B(t) 的 矩 母 函数 4(s) = Ble*309], 则 
g(s) = Ble*3(0)] = I er 


ny 27t 


ez /2t dz 二 ets /2 


二 


相应 地 BIW(t)] = EB(e3(0) = 4(1) = es. 


这 样 就 得 到 了 几何 Brown 运动 的 一 阶 矩 和 二 阶 甜 . 

4 、 Brown 运动 的 积分 

令 5(t) = 四 B(wu) du, 称 {5(t),t > 0 他 Brown 运动 的 积 

由 正 态 分 布 的 性 质 知 ， {S(t),t > 0} 为 正 态 过 程 . 于 是 讨论 它 的 性 质 就 只 需 研 究 它 
的 期 五 和 协 方差 ， 不 过 在 讨论 之 前 ， 需 要 先 引 入 一 个 预备 定理 . 
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定理 5.5.1 若 对 随机 过 程 {X(t),t > 0} 满足 BIX(t)| < x, DX(t) < x, 则 有 


alf x(a)= f atxtalas, 
mf {xox ee [ fax i 


证 明 ”利用 Fubini 定理 即 得 . 
于 是 利用 定理 5.5.1 有 














v0<6<t. 有 


Cov[S =/ [a (u) Blv) du do] = 站 [a [B(u)B(v)| du dv 
oo 上 (uAv)dudv = 上 wdu + udzj dv 
0 Jo 0 Jo 


6 ,2 
| {3 +o )} do 
62 


= 


这 样 ， {S(t),t > 0} 就 完全 地 被 刻画 出 来 了 . 

在 商业 中 ， 考 我 们 设 5(t) 为 + 的 价格 ， 则 四 名 = B(t) 为 价格 变化 率 ， 而 它 通 常 是 
遵循 Brown 运动 的 ， 这 时 一 个 很 有 意思 的 事实 ， 在 实际 中 有 不 少 应 用 

5 、 Brown 运动 的 形式 导数 

设 {B(t),t> 0} 为 Brown 运动 , 考虑 增 量 之 比 , 固定 At > 0, 令 20-30 全 全 由， 
显然 {22 思 ,1 > 0} 是 一 正 态 过 程 ， 易 知 其 一 阶 、 二 阶 和 矩 为 : 














Bf 人 BC Re E[B(t + At)] — E[B(t)] _ 

ET Ai 0 
AB(t), 1 1 ee 
DI{ a }= rz PIBG + A — BO] = rstt+At 机 二 二 


故 全 轩 ~ NW(0, 去 ) 
At 5 
再 考 卡其 协 方差 设 0<s<t, 取 At 充分 小 , 使 s < s 十 At<t, 于 是 有 : 


i ee 5) 由) - 本 209) ,ABW _ 


= 
AAA At At 














可 见 s 关 + 且 当 At 充分 小 时 ， 领 与 合 内 相 可 独立 . 
进一步 讨论 ， 当 At 一 0+ 时 ， 及 ( 信 由) = 0, D( 倒 只) 一 vw, 因此 我 们 把 At 一 0 
时 ， 正 态 过 程 {22 包 ,+ > 0} 的 极限 过 程 形式 上 记 为 { 阳 由 ,+ > 0}, 定义 如 下 : 


5.6 带 有 漂移 的 Brown 运动 


称 {由 ,t > 0] 为 Brown 运动 的 形式 导数 ， 若 

1° Vvt>0, BW ~ N(0,x) 

2° Yi 夭 如， Or 与 35 lt=ts 相互 独立 . 

Brown 运动 的 形式 导数 ， 有 时 亦 称 为 连续 参数 的 白 噪 声 . 它 在 物理 上 有 许多 应 用 ， 
在 随机 微分 方程 理论 中 也 起 着 极其 重要 的 作用 . 





$ 5.6 ”和 带 有 漂移 的 Brown 运动 (Brown Motion With Drift) 


这 是 一 类 很 重要 的 随机 过 程 ， 先 看 看 它 的 定义 . 

定义 1 设 {B(b,t > 0 为 Brown 运动 , 记 X(t) = Bt)+At 4 为 常数 , 称 {X(t),t > 中 
是 带 有 漂移 系数 为 /的 Brown 运动 D 

带 有 漂移 的 Brown 运动 的 背景 是 一 个 质点 在 直线 上 作 非 对 称 的 随机 游 动 ， 它 具有 一 
定 的 趋向 ， 于 不 规则 微观 运动 中 又 有 一 定 的 宏观 规则 运动 存在 ， 如 分 子 热 扩 散 、 电 子 不 
规则 运动 等 ， 确 切 叙 述 如 下 : 

一 质点 在 直线 上 每 经 At 随机 地 移动 Ar, 每 次 向 右 移 Ar 的 概率 为 p, 向 左 移 一 Az 
的 概率 为 4, 且 每 次 移动 相互 独立 ， 以 X(1) 表示 + 时 刻 质点 位 置 ， 令 


| 1 第 次 向 右 移 
| -1， 第 次 向 左 移 . 


则 X(t) = (Az)(Xi + X22 十 十 成 二])， 
设 Ax = VAt, p= (1 二 JVAH), gq = (1 一 JVAt), 对 给 定 的 1. 取 充 分 小 的 At, 使 
LVAt <1, 当 At 一 0 时 





BIX(t)] =(Az ae- 0) 


=VAt. | —]:uVAt 
— nt. 

DIX(t)] =(Az) [oe EX? — (EXi)")] 
=(VSDII -Oo 
=At 二 ]IL ~ (2p 一 1 
—t. (At— (0) 


163 
所 以 匀 () ~ NW(pt,t). 可 见 它 和 {B(t),t > 0} 都 是 正 态 过 程 ， 只 是 均值 不 为 零 . 这 是 
由 其 不 对 称 性 引起 的 . A 表示 单位 时 间 内 质点 漂移 的 平均 值 . 
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在 进一步 研究 带 漂移 的 Brown 运动 的 重要 性 质 之 前 ， 先 证 明 一 个 重要 的 预备 定理 . 
定理 5.6.1 设 {1B(t),t > 0} 为 Brown 运动 , 令 X(t) = B(t)+pnt. T= min{ft:t> 
XX(j = 二 a}. 了 (0) = zz 天 a. 则 当 有 > 0 充分 小 时 ， 


PT < hIX(0) = 2) = o(h). 
证 明 不 妨 先 设 x < a, 证 明 的 思路 是 利用 有 关 的 Brown 运动 的 结论 ， 易 知 


P(Ts < hIX(0)= 72)= P(To_r < hIX(0)=0) 全 Po(Ts_r < h) 





取 有 满足 0<h Ih>0. 
则 有 
Po(Tas Sh) = Pol mag X(s) > 4-2) = Pol ma, [B(s) + 41s] > 0— 2). 
由 于 存在 下 列 事件 包含 关系 : 
(me ) + 1s) > 0 B(s) >a—z— lx}, 
故 


丽人 Eee <Po{ mas DBP(s) 之 4 一 2 一 Iulh} SS 了 二 信 扩 <h) 


<2P{|B(W)| > a — z ~ lalh} 


ey /2h dy 





1 
二 
V27h Jyl>a- Se 


< —y° /2n di 
— Vonh ee (laa nn) 2 





2 =/. 40—Yy /2h dy 
(a 一 2 (a—z— |nlh): Vanh - 
2 2 
e-em 
所 以 有 2 
Be (5.6.1) 
(a—2— |u|h)t 


注意 证 明 中 用 到 了 万 | .er /hdy = 3h?, 即 求 N(0,) 正 态 分 布 的 四 阶 矩 为 3h?. 
当 a < z 时 ， 证 明 方 法 完全 类 似 ， 不 再 袭 述 . 口 
有 了 上 面 的 定理 ， 就 可 以 介绍 带 漂移 Brown 运动 的 一 个 有 趣 而 重要 的 结论 . 
定理 5.6.2 设 {X(t) = B(t) 十 t,t > 0} 是 漂移 系数 为 /的 Brown 运动 . 对 a.b> 0， 


—b<z<a,T = min{tt:t>0,Xt)=a),T,=p84{t:t> 0,X(t) = -0 有 
| e242 有 CE 一 2HU7 
f(z)=P(T, < Ty < scIEO=o= 二 一 一 (5.6.2) 
e241b — e-2ua 


5.6 带 有 漂移 的 Brown 运动 


证 明 ”证 明 的 思路 是 用 微分 方程 的 方法 求解 ， 因 为 上 述 (5.6.2) 式 显然 不 易 由 演绎 
推导 得 出 ， 所 以 首先 建立 f(z) 满足 的 微分 方程 2yf'(z) + 1”(z) = 0. 然后 通过 求解 此 方 
程 ， 得 出 (5.6.2) 式 . 

仍 从 事件 分 解 入 手 ， 利用 定理 5.6.1 利 Brown 运动 的 性 质 ， 记 一 {Ts < T_, < 00}, 
B= (TT >h,D>h),h>0, 有 8 充分 小 ，X(h) 一 z=Y. 

则 B= {7 <h}U{T ,<h}. 

于 是 P(B°|X(0) = 7x) < P(T, <hX(0) = 72)+ PT ,<hX(0) = 72) = o(h). 

注意 这 里 用 到 了 定理 5.6.1 的 结论 . 所 以 P(BIX(0) = 7z) = 1 一 o(h). 可 知 
f(z)=P(CIX(0) = 2) 

=P(B|IX(0) = 2). PCIX(0) = 2,B)+ P(B°|X(0) = 2)P(C|IX(0) = 2,B°) 

=(1—o(h))P{C|X(0) = x, B}+ o(h) 

=P{C|X(0) = yn X(s) > —b, i X(s) < a}++ oh) 

=E{P{T, < Ty <+%|X(0) = ns X(s) > 一 人 二 二 X(s) < a,Xh)}} + oh). 
令 X(t) = Xh+t), T= min{t:t>0,X(t)=a),T, = min{t:t>0,X(t)= -1b. 

显然 ， 在 B= { >h,T_s > 发生 的 情况 下 ， 


了 二 及 十 二， Ty=h+T,. 
故 f(x) = BEB{P{h+ TI <h+T ,< olX(0)= 2,minocscn X(s) > —b, 
人 <a,X(h)}}+o(h). 


利用 Brown 运动 的 马 氏 性 ， 有 





jz) =B{P{Ts < Ty < |X} + olh) 
=E{P{T < TT, < lz i+Y}}+o(h) 
=E{f(z+Y)}+o(h). 
定理 证 到 这 里 已 是 胜利 在 望 . 
设 f(z) 在 zx 点 及 附近 有 任意 阶 导 数 存 在 ， 则 有 


f(z+Y)= jz) 二 万 z)71+ 





EY = E[X(h) -z=uh+e—r= uh 
之 .二 2_1h 2 
EY” = EI[X(h)— 7x) = EfB(h)+ uh zr] =ph +h. 


因 Y ~ N(ph,h). 
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知 BY* = o(h), 当 让 > 3 时 . 








所 以 
f(z) =E{f(z +Y)}+o(h) 

=BE{f(z A > )y? 十 …} 十 o(h) 
-+ 加 本 + 二 
=f(0) + hf (e) + Et pe) + oh 
=f(0) + phf (2) + SF"(e) + ol). 

于 是 | 时 

pa+3P+2 =0, 
令 久 一 0, 得 


24f' (2) + f° (2)=0. 


这 就 得 到 了 我 们 所 要 寻找 的 那个 关键 的 微分 方程 , 加 上 边界 条 件 : z = a 时 ，f(a)=1; 
z 二 一时 ， f(b) =0, 于 是 有 


| 0 (5.6.3) 


f(a)= 1,f(-0) = 
为 解 此 微分 方程 ， 两 边 积分 ， 得 
24f(2)+ f(z)= C0, 


两 边 同 乘 47, 有 
df(e2wz f(z2)) 一 Creamr 
dz 
再 积分 得 


eur jz) 2 Cie2Hz 平 Co 即 #(x) 二 G1 十 Ce 
以 f(a) = 1, f(-05) = 0 边界 条 件 代 入 ， 得 方程 组 


C1 十 Cae Ha 一 出 
C1 十 Cae =0. 


解 之 ， 得 C1 = Ca = grea 
于 是 f(z) = r= 人, 可 知 f(z) 在 x 及 附 浙 殉 有 任意 阶 导数 . 
这 个 定理 的 证 明 是 很 巧妙 的 ， 其 中 利用 了 许多 概率 论 和 数学 分 析 里 的 技巧 ， 非 常 什 
得 玩味 ， 下面 再 给 出 一 种 运用 连续 鞭 停 时 定理 的 证 明 方法 . 

















5.6 带 有 漂移 的 Brown 运动 


证 法 2 首先 假设 XX(0) = 0. 

记 TTs = inf {t > 0; 卫 (t) = a 或 X(t) = 0, 并且 令 TAn= min{T,n},T = Ts 因为 
B(t) = 了 (t) 一 jt,t > 0 是 著 , 又 易 知 TAn (n > 1) 关 于 B(t) 是 停 时 , 且 P(TAn < %)=1, 
故 由 停 时 定理 ， 有 


0= EI[B(0) = E[B(TAn) = EI[X(TAn) — WEITAn)] 


所 以 EITAn] < LEI[X(TAn)] < (a +b) <o0. 即 ，Yn>1, 有 EITAn|< (e+ Db) < cc， 
H 


和 
又 Vn>1,TAn< 人 TT 入 (n 十 1), 由 单调 收敛 定理 ， 有 





、 让 
E(T)= dim E(TAn)< a +D) < oo. 


从 而 P(T < >o) = 1. 
令 V(t) = exp {一 21X(t)}, 易 证 V(t) 是 默 ， 由 连续 蔷 停 时 定理 ， 有 


EIV(Tiw)] = BIV(O] =1. 


则 1= P(X(Ts( 0D) =0) :exp {-2pa} + P(X(To wn) = -0) exp{-—2p(—b)}. 所 以 


1 — exp {21b 
P(X(T, yy)) = oa) = ee 
exp {—2ua} 一 exp {21b} 


又 因为 


PT < Tis < SC) = 2) =P(X(Ts)) = alX(0) = 2) 
=P(X(Tia_ ws) -bz)) 二 以 一 人 2): 
所 以 
ee 1 — exp {2u(5 + 2)} 
和 exp {—2u(a 一 2) — exp {24(D + 2)} 
_ exp {21b} — exp {—2J2} 
exp {2b} — exp {—2ya} 
从 而 (5.6.2) 式 得 证 . 口 
此 定理 的 结论 很 “ 绝 ”， 应 用 很 广 ， 下面 给 出 此 定理 的 一 个 常用 的 推论 . 
推论 1 设 {X(t),t > 0} 为 带 漂 移 的 Brown 运动 ，X(t) = B(t) 二 yt, 车 4<0, 则 





> )) = 0} = es 
Pe Co) 0} = ee’, 


即 当 jy <0 时 ，M = maxo<t<s X(t) 服从 参数 为 21 的 指数 分 布 . 
证 明 ”由 式 (5.6.2), 令 5 一 x, (01]670, 即 有 
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在 实际 中 ， 有 了 时 这 个 推论 较 原 定理 应 用 起 来 更 为 方便 . 

将 带 漂移 的 Brown 运动 的 定义 写成 微分 形式 ， 得 dX(t) = dB(t) + 4dt, 即 质点 
时 刻 位 移 的 增 莉 分 解 为 随机 性 增 量 与 确定 性 增 量 之 和 ， 一 般 地 ， 有 如 下 推广 : dX(t) = 
64B(t) 十 Jdt. 若 扩 散 系数 6 与 漂移 系数 / 不 是 常数 ， 而 是 t+ 与 X(t) 的 函数 ， 那 么 有 如 
下 更 一 般 的 随机 微分 方程 : 


dX(t) = 6(t, X(t)) dB(t) + ult, X(t)) dt 


这 类 随机 微分 方程 可 用 以 描述 分 子 的 热 运动 ; 电子 的 迁移 运动 规律 等 . 例如 ， 以 X(t) 描 
述 一 个 粒子 在 液体 表面 上 时 刻 的 速度 ， 有 
dX(t) 


me = X(t) 1 


其 中 m 为 质点 质量 ， -X(t) 为 粒子 与 液 面 的 摩擦 阻力 ， 而 至 名 为 由 分 子 撞击 产生 的 
总 的 合力 . 求解 这 一 类 随机 微分 方程 在 物理 学 工程 中 是 常见 的 ， 而 这 离 不 开 Brown 运动 
的 理论 . 
可 见 研 究 带 漂移 的 Brown 运动 很 具有 实际 意义 ， 只 要 赋予 相应 系数 以 物理 意义 ， 就 
可 以 用 它 来 刻 划 许多 复杂 的 难以 研究 的 物理 过 程 ， 工 程 及 经 济 现象 . 
下 面 诸 例 均 采 用 微分 方法 求解 运用 连续 鞭 停 时 定理 的 方法 ， 这 里 不 再 给 出 ， 留 给 
读者 作为 练习 . 
例 1 控制 生产 过 程 的 优化 
考虑 一 个 不 断 恶 化 的 生产 过 程 . 设 该 过 程 可 用 一 个 具有 漂移 系数 为 / 的 Brown 运动 
来 描述 ， 当 过 程 的 状态 为 b(b > 0) 时 ， 过 程 损坏 而 失败 . 此 时 必须 花费 R 元 才能 使 过 程 
回 到 良好 状态 0， 另 外 ， 我 们 可 以 在 过 程 失效 状态 5 之 前 采取 预防 性 的 维修 .车 在 状态 
z(z < 中 采 取 了 预防 性 维修 (或 某 种 调整 ), 设 这 一 尝试 成 功 ( 即 回 到 状态 0) 的 概率 为 nu， 
而 失败 ( 即 仍 转 为 状态 ) 的 概率 为 1 ~- as. 一 次 维修 的 尝试 费用 为 C( 与 x 无 关 ). 我 们 的 
问题 是 如 何 寻 找 使 得 在 单位 平均 回程 时 间 的 平均 费用 最 小 的 维修 策略 . 
先 考虑 当 过 程 状态 为 z(0 < z < 由 时 预防 性 维修 的 策略 ， 显 然 ， 每 次 回 到 状态 0 构 
成 一 更 新 过 程 . 因此 由 更 新 过 程 的 有 关 定理 ( 见 第 二 章 $ 2.10), 其 单位 时 间 平 均 费 用 为 : 
巨 {一 个 更 新 周期 的 花费 } C+ Rl os) 
{更 新 周期 长 度 } ”5( 到 达 x 的 时 间 ) 
Bi = B{ 从 0 出 发 到 达 x 的 时 间 }, 考虑 充分 小 的 > 0, 令 Y= X(h) 一 X(0), f(z 一 
ie 的 时 间 }, 则 类 似 于 上 
面 定理 5.6.2 中 的 方法 ， 有 


dB(t) 
dt 




















(5.6.4) 


f(z)=h+ Elf(z A608] + ol(h) (5.6.5) 


其 中 o(h) 表示 在 h 之 前 已 到 达 x 的 概率 . 
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由 吾 [F(X(O)] = BE(f(z—Y))= Blf(2)— f(r)Y + 寺 f" (2)Y?...] 
= f(0) — phf (2) + 3hf"(e) — 


由 式 (5.6.5) 式 Bf(z 一 YY)= f(z)—h—o(h). 





于 是 
) 1 o(h) 
l= Hf'(r)— 2 (2) 十 4 
令 ) 一 0, 得 
1= pg 一 3 (5.6.6) 


与 定理 5.6.2 中 求解 方法 不 同 的 是 我 们 不 直接 解 上 式 ， 但 注意 到 ， Yz,y > 0， 


f(z 十 y) =B{ 从 0 到 x+y 的 时 间 } 
=EB{ 从 0 到 x 的 时 间 } 十 {从 x 到 x+y 的 时 间 } 
=B{ 从 0 到 x 的 时 间 } 十 {从 0 到 y 的 时 间 } 
=f(z) + f(y). 


故 f(z) = Cz, f'(z) = C. 

由 (5.6.6) 式 f(z)h=1, 得 C= 二 , 故 f(z)=. 

所 以 ， 由 式 (5.6.4), 在 状态 z(0 < x < 5) 采取 维修 策略 的 单位 时 间 平 均 费 用 为 
4+2a-es, 而 不 采取 维修 策略 的 单位 时 间 平 均 费 用 为 至 . 对 于 给 定 的 函数 a, 我 们 能 
够 用 微 积分 的 办 法 来 确定 使 长 期 运行 的 单位 时 间 平 均 费 用 达 最 小 的 策 五 . 

例 2 带 漂移 布朗 运动 在 经 济 领域 应 用 . 

自 九 十 年 代 后 ， 出 现 了 研究 倒 向 参数 随机 微分 方程 (Backward Stochastic Differential 
Equation) 的 理论 问题 ， 简 称 BSDE 问题 . 设 随 机 过 程 和 = {X(t),0 < t < 了 T} 满足 下 列 
方程 : 








dX(t) = f(t, Xt) dt + g(t, Xt) dB), vO<t<T,. 
X(T)=&. 

显然 ， 上 式 是 一 般 的 带 漂移 布朗 运动 的 微分 形式 .BSDE 在 经 济 领 域 有 重要 应 用 ， 著 名 
经 济 学 家 D.Duftie 和 L.Epstein 首先 发 现 BSDE 可 以 描述 市 场 经 济 环境 下 的 消费 偏好 . 
E.Ikaroui 和 Quenez 发 现金 融 市 场 的 许多 重要 派生 证 券 的 理论 价格 可 以 用 BSDE 来 求 
解 . 下 面 举 一 简单 的 例子 . 

设 一 个 自 融 资金 是 无 消费 的 单身 汉 (例如 无 牵挂 、 无 负担 又 节约 的 单身 汉 ), T 为 他 
成 家 的 日 期 ， 他 在 [0, 了 | 期 间 的 决策 是 : 在 t 时 刻 将 他 财产 X(t) 之 中 的 Y(t) 用 于 买 股 
票 ，X(t) 一 了 Y(t) 用 于 买 债券 ， 则 他 的 财 攻 8{XOb.0<t<T} 满足 : 


dX(t) = F(X YH)) dt — Yt) dBt). 
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其 中 所 并 (了 的) = 了 王 才 十 亿 一 站 罗 十 ( 尽 一 7)( 王 的 一 工作 )， 7 > 0 为 债券 利率 ， 届 
是 市 场 贷款 利率 .一般 忆 > ” 当 玉 =7 时 ，j2 人 =r2+0 一 7 若 他 计划 在 工时 结 
婚 ， 自 己 的 财产 要 达到 & 元 ， 问 他 在 [0, 了] 内 应 如 何 作出 投资 决策 {Y(t),0 < t+ < 了} 才能 
达到 自己 的 目标 : 针 (t)=&? 

这 个 决策 问题 可 化 为 求解 下 列 BSDE 问题 : 


dX(t)= fAXH, Y(t) dt — Y(t) dB(t) 
X(T)= < 


的 解 {(X(),Y()),0 <t+<T}, 其 中 1B(),t > 0) 为 标准 B.M.. 上 面 随机 微分 方程 的 解法 
将 在 后 面 的 第 七 章 讨论 . 

以 上 只 是 带 漂移 Browa 运动 应 用 的 两 个 实例 ， 它 的 众多 应 用 ， 我 们 将 在 以 后 的 工作 
和 研究 中 自然 会 遇 到 |. 

随机 微分 方程 求解 后 ， 可 以 进而 求 出 带 漂移 布朗 运动 X(t) 的 期 望 、 协 方差 等 随机 性 
质 . 下 面 介 绍 Ornstein-Uhlembeck 过 程 的 期 鹿 、 协 方差 的 求解 . 

例 3 满足 随机 微分 方程 dX(t) = 一 aXX(t) dt+6dB(t) (a > 0) 的 随机 过 程 {X(t),t > 
0} 叫 作 Ornstein-Uhlembeck 过 程 . 解 上 面 的 随机 微分 方程 (解法 在 第 七 章 讨论 ), 得 X(t) = 
eetX(0) 十 6 e-?(t-W) dB(wW), 设 天 (0) = 二 zx, 则 BX(t)= we-?t. 设 7>0， 


Cov( X(t), X(t+7)) =E(X(t) X(t+7)) — E(X(t))E(X(t+7)) 


t ptir 
=E ” (/ [ et Weoalttr ot) dB(u) dl 
0 Jo 


t nt 十 7 
—62e-°r-2atp I/ / euear dB(u) dt 
0 v0 
t pt 十 了 
| et I Ep( dB(u) dB(v)) 
0 v0 


其 中 ， 


0: xu dB 与 dB() 独 立 . 


= 6(u— v2) do. 
dv : 4 二 v0, 为 方差 ， 等 于 区 间 长 度 . -0 


EldB(u) dB(v)| = | 
从 而 ， 原 式 =62e-o(2t+7) f ezov du = 62/2a (1 ~ e-20t)e-or, 
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定义 1 {XX(t) = (Xi1(t)), 了 2(t),… ,了 Y(t)),t > 0} 是 取 值 为 R* 的 随机 过 程 ， 若 满 
足 : 
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1° 对 VO <t < < tn, Xt) — X(0), X(t2) 一 于 (本 ) ,X(tm) — X(tm-1) 
相互 独立 . 
2 ”对 Yvs>0.4>0, 增 量 和 (t+s 引 一 X(s) 为 n 维 正 态 分 布 其 p.df. 为 





人 pe (5.7.1) 


其 中 加 = (1-102) 

3 ”对 每 一 w€ Q, X(t,w) 是 t 的 连续 函数 . 

则 称 {入 (),t > 0} 为 n 维 Brown 运动 . 吾 

简 记 X(t) 为 Xi, 设 初 始 分 布 x(4) = P(X(0) < 4), 其 中 A E RF". (57.1) 式 给 出 了 
(s 十 t) 一 了 X(s) 的 p.d 由 此 可 求 X(t) 的 p.df, 因 X(t)= X(t) 一 XX(0) 十 (0), 由 (5.7.1) 
式 及 卷 积 公式 ， 得 





P(X(t) € A) = 站 他 EE A 到 oz] dy. (5.7.2) 
为 了 突出 的 作用 ， 有 时 记 : 
P(X(t)€ A)= P(X(t) € 4). (5.7.3) 


n 维 BM{X(t),t > 0} 有 以 下 简单 性 质 : 

1°” 设 五 是 "中 的 正 交 变换 ， 则 五 X= {五 X(t),t> 0} 也 是 n 维 BM. 

2。 设 eR" 辕 定 ， {X(t)+a.t> 0} 也 是 BM. 

3 " 设 c> 0 为 常数 (ce 则 { 王 各,t > 0} 也 是 BM. 

证 明 只 证 1”， 其 余 两 个 可 类 似 地 证 明 . 

由 于 五 (X(s 二 )) 一 五 (X(s)) = 有 H(X(s 十 ) 一 X(s)) 只 依赖 于 天 (t 十 s) 一 XX(s), 故 由 
XX 的 增 量 独 立 ， 即 得 HX 的 增 量 独立 性 . 

其 次 ，X 对 t 连续 ， 故 HX 也 连续 .由 (5.7.1) 式 知 了 (s 十 一 XX(s) 的 特征 函数 为 


Blexpli(X(s+t)— X(s),Y)} = exp{—(y.y)t/2}, vy ED" (5.7.4) 


其 中 (x,9) = DD Yi 
由 正 交 变换 保持 内 积 不 变 ， 并 利用 (5.7.4) 式 及 五 ~-! 也 是 正 交 变换 ， 得 


Blexp[li(H(X(s+t)— X(s)),y)]} = Elexpli(X(s +t)— X(s), HT 1(y))} 


= exp{—(H-1(W), -710) : 5} = exp[-(y. 0)t/9 (5.7.5) 


所 以 吾 X(s 十 四 一 吾 X(5) 的 p.dt. 与 (胡同 ， 故 HX 也 是 nn 维 BM. 
类 似 于 1 维 Brown 运动 ，n 维 Brown 运动 也 具有 马 氏 性 ， 正 态 性 ， 扣 的 性 质 . 这 里 
不 在 述 . 读者 可 对 照 1 维 情形 自己 推导 . 
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转移 概率 密度 P(t,z,y) 的 性 质 . 
记 


人 1 2 
Ply =P(t = [ont exp( | 





jk (5.7.6) 
其 中 +> 0. zw,y E 下 ”， 
由 (5.7.2) 式 知 , 若 和 (0) = x ER" 固定 , 或/ 集中 在 单 点 集 > 上 , 并 记 为 已 , 则 


P(x) eh= f Pew)ay (5.7.7) 
也 








P(t,z,y) 可 以 直观 解释 为 : 作 BM 的 粒子 由 > 点 出 发 ， 于 时 刻 上 转移 到 点 y 附近 的 转移 
密度 即 为 P(t, zx,y). 易 知 ， P(t,z,y) 关于 zx, y 是 对 称 的 . 
下 列 定理 说 明 BM 与 牛顿 位 势 之 间 的 重要 联系 . 





定理 5.7.1 
x EU 
so) = Ptrmy) dt= 2 (5.7.8) 
,0 co， 人 六 2. 
其 中 T(a) = fo zle-* dz， 
记 Cu, = 2 
则 
去 ， nn 二 3 
0.=! 王 a (5.7.9) 
|] EY, n=2k+1>3 时 


一 刀 一 21 > 4， 


证 明 vs > 0, 有 











站 
=|z|2—" | U3? exp(—u) du 


[zl2/2s 


一 2 一 1|z|2” | 全 -1exp( 一 由 ) du. 


[Ey 





当 且 仅 当 -1>0, 即 n>3 时 


1 a 
lim 一 一 一 4 一 ie du = 
< 一 So DA/2 lal? 
28 
光 172 
[DL 


工 生 一 蕊 


Ee 
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g(2,y) 的 直观 意义 是 : 从 * 点 出 发 经 有 限时 间 转 到 y 附近 的 概率 密度 . 

下 面 简 要 介绍 关于 电荷 产生 的 位 势 ， 再 有 它 与 g(z,vy) 之 间 的 关系 . 

1 ”点 电荷 产生 的 位 势 

设 在 点 yo 处 有 一 电荷 go. 它 在 任 一 点 z( 关 yo) 产生 的 电位 势 等 于 把 一 单位 电荷 从 无 
穷 远 处 移 到 x 点 所 作 的 功 ， 其 电位 势 的 值 为 : 去 .FE 村 

2” mm 个 点 电荷 q; 分 别 在 点 yi(i = 1,2,… ,mm), 即 


2 V2 Yi Ym, 


41,42:° 5" ,is Ym: 


可 看 作 离 散 点 电荷 的 分 布 (与 离散 1.v. 的 分 布 律 相 似 ), 这 m 个 点 电荷 在 x 点 产生 的 位 势 
为 : 





7 


2 二 证 


3 " 现 设 电荷 按 一 测度 j(y) 分 布 ， 它 表示 在 (y,y 十 dy) 上 约 有 电荷 dy(y). 定义 由 
p(y) 在 z 点 产生 的 电位 势 为 Gh(z) = 去 记 ; 供 引 . 从 分 析 的 观点 看 ， 上 式 定义 了 一 个 积 
分 变换 G, 它 把 测度 / 变 为 函数 Gj. 由 定理 5.7.1 可 知 ， 上 述 积分 变换 的 核 去 二 恰好 
就 是 3 维 BM 转移 概率 密度 对 时 间 t 的 积分 g(z,y). 这 正 是 BM 与 牛顿 位 势 联系 起 来 的 
纽带 之 一 . 

若 考虑 EE” 中 ， 记 > = (zizo za lz = (Di 7) 对 7>0, 记 B(7)= {2: 
加 和 站 B?(7) = {zz| < S(7) = ftz:lzl= 了 .它们 分 别 表示 "中 以 原点 为 中 心 ， 
7 为 半径 的 球 、 开 球 和 球面 . 设 y > 0, f(y) 是 y 的 函数 ， 若 以 下 左边 积分 存在 ， 则 有 


1/ pl =/ sn-1f(s) ds 
B(r) ~ T(E) ) 


若 取 f 三 1, 并 利用 T(z 十 1) = zT(z), 可 得 球 B(7) 的 体积 : 











Bl")| = Fa 
上 式 对 7 微分 ， 可 得 球面 5S(7) 的 面积 : 
oF/2 ,rn-1 
Sm = 二 ry (5.7.10) 
+ 二 1 时 ， 有 
| 27"/? | 
1S(1)| = TT (5.7.11) 
与 (5.7.8) 、(5.7.9) 式 比较 得 人 
Cn 一 一 
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~ 2 1 
Ptzhd=- (n> 3). 
) (到 一 213SG) ly- zl"-? 


接 下 来 要 讨论 的 是 所 谓 半 群 及 无 穷 小 生成 算 子 . 
设 f(z) 为 定义 在 "上 的 函数 ， 记 
B ={f : f 有 界 } 
C ={f : fe B 且 f 连 续 } 
Co={f :fe CHf(%)= lim f(z)= 0}. 
| = sups | jz 对 EC, 定义 变换 对 如下: 
Tif(z) = FP wg) dy (> 中 (5.7.13) 
显然 有 
[TF < A, Rl < 1. (5.7.13) 
同时 还 有 以 下 一 些 性 质 : 
2° TCoCCo 
证 明 对 vfeB, 则 有 


Tf(z f(zo)| < | 有 | C2) mn [es = -4272t _ oe-lzo—yl’ /2t| dy. 
Wi 也 


当 z 一 zo 时， 上 式 一 0. 即 到 Acz) 连续 ， 即 到 Ac) ec 人 BC Co. 
对 VfeECo,N>0, 有 
1 2 — yl 1 到 一 中 
IES Ee ee 


由 f(x) = 0 知 ， 对 ve >0, 当时 充分 大 后 ， 第 一 个 积分 式 小 于 5. 固定 此 N, 当 |z| 充分 








大 时 ， 第 二 个 积分 小 于 5, 于 是 了 f(x)=0, 即 TCo C Co. 百 
此 外 还 有 下 述 定理 . 
定理 5.7.2 设 f 一 致 连续 ， 则 
lanl2z ~— fl|=0. (5.7.14) 


证 明 ”对 ve > 0, 由 于 f 一 臻 连续, 存在 5 > 0, 使 对 Vy, 有 supjajcs |f(z+ 办 -f(y)| < 
5, 所 以 


Tf — fl <sup 1 :| 5 有 exp( Ee )|f (z+y) — fl dz 

















E 1 lel? 
名 

2 [rl>8 (27t)"/? 174 

E 1 Iu? 
= 十 2||f se 2 du. 

2 | | ul> (27)"/2 
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当 t 充分 小 时 ， 第 二 项 积分 小 于 5, 所 以 
limlnf -f=0. 口 
由 定理 5.7.2. 我 们 定义 
Tbf = f，T5 = 了 ( 恒 等 算 子 ) 


对 t+ 一 %, 我 们 有 
定理 5.7.3 着 f eCo, 则 
dm | 人 =0, 


(证 明 从 略 ). 
下 面 证 肥 具有 重要 的 半 群 性 ， 即 
定理 5.7.4 Vs.t> 0. 芒 = 工 有 


Ts+t 二 了 Ts Tto (5.7.15) 
证 明 
ee ya eo, a 
TTif(z) =(27s) 7(27t) 2 ~ exp( 本 )Fz)dz dy 
/Rr ， LS 2t 


于 le 一 =|2 
= "(3 / 1 e 240) 
Rn n 


2st(s+t)-! 





}f(z) dy dz. 


‘exp{ 一 





由 于 [27- exp{ 一 二 和 lb }dy=1. 
故 了 Tf(z) = [27(s +t)] ?fs exp{-|2 — 2 /2(s + ON (2) de = Trtf (2). 
即 : > 下 .下 
由 上 可 知 ， {五 ,t > 0} 构成 作用 于 C 上 的 线性 算 子 压缩 半 群 . 
引 理 1 着 f 一 致 连续 , 或 上 e Co, 则 f(z) 对 + > 0 一 致 连续 ， 且 此 连续 性 对 
z ER" 也 是 一 致 的 . 
证 明 利用 的 半 群 性 ， 压 缩 性 及 定理 5.7.2, 对 Yh > 0, 有 














Traf = Tf < NT Tf = HH < Nf oA. 


当 太 一 0 时 ， 上 式 一 0. 
对 几 = -e<0. 有 


[Traf = Tf < MEd]: Nf = Tefll < Tef = Hl 
175 











h 一 0 时， 上 式 也 趋 于 0. 
注 : 按 范 数 | 的 收敛 称 为 强 收 敛 ， 记 为 5S 一 lim. 
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定义 2 对 feC, 记 


i 
h—0+ h 


=g 或 4f= 5g. (5.7.16) 
Da={f:feCHAF=geEC) (5.7.17) 


称 A 为 半 群 {ZT,t > 0} 或 过 程 {X(),t > 0} 的 强 无 穷 小 算 子 . Da 为 A 的 定义 域 . 口 
以 下 定理 则 把 BM 与 Laplace 算 子 联系 起 来 : 
定理 5.7.5 设 f 有 界 , 二 次 连续 可 微 , 二 阶 偏 导 有 界 且 在 开 " 上 一 致 连续 , 则 Yy < D3， 


有 
Of(z) A 由 
Or? 2 





Af(1) = 5 3 
“i=1 


其 中 z = (21, 82 ,Pn), A = Dici 是 熟知 的 Laplace 算 子 . 
证 明 令 y=z+ viz, 即 yr= zw+ Vizi, i=1,2,... ,Nn, 
Tf(z)= (2rb-3 fos exp(—LS) fly) dy 
= (27t)-$ fa exp(—H)f(z + Viz) dz 
记忆 二 总 ， A 2 并 利用 Taylor 展开 式 : 
f(z+ vtz)= f(z)+ Vi zfi(z)+ 2 i=1 Zz fij(T) 
+§ D1 j=lfi (2) — fij(2)]zi%. 
其 中 的 坐标 在 x 与 x+ vtz 的 坐标 之 间 ， 以 (5.7.19) 代入 (5.7.18), 并 注意 到 


/ exp{—z2/2}zfi(z) dz =0, i=1,2,..,n 
a 


(5.7.18) 





(5.7.19) 


/ exp{—z?/2}ziz;fii(z) dz = 0,， i 


了 7 
站 exp{ 一 227/2]22 访 (z) dz A 
Rn 
得 , : 
Tf(z) = f(z) + 3Af(z)+ (27)-#. 57(t, 2) (5.7.20) 
其 中 J(t,z) = ft, exp{—22/2} Dy Dfij (3) — fi (2)]zizj dz 
令 F(z,z,t) = maxij |fi(z) — fij(z)| 则 对 vs > 0. 有 


n 也 


人 Zz2 22 
T(t, 2)) 人 e OOF) 


We 


n 
3 F(z,z,t)exp{—z?/2}z22 dz (z2 = > 2 ) 
Er = 





< Flezb2emp(-203dz+2cll nf 22exp{ 一 22/2} dz 
|:|<s 这 l=|>s 


= 十 7， 
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由 fi; 一 致 连续 性 ， 当 + 一 0 时 ，I 工 对 2 均匀 地 趋 于 0, 故 对 任意 的 s > 0, 有 


lim sup |7(t, 2)| < 2max||fijl|: "/ 22 .exp{—z*/2} dz 
t 一 0 zx 药 汉 |:|>s 


3 一 00 时 ， 上 式 右 方 趋 于 0, 故 


Essup (0) =0 


从 而 ， 由 (5.7.20) 式 得 ,| 
f lafl=0. 


lim || 
t 一 0 
定理 得 证 . 口 


与 一 维 BM 一 样 ， 在 na 维 BM 中 首 中 时 也 是 一 个 很 有 用 的 概念 . 
设 {X(t).t>0} 是 n 维 BM, 4C Rn， 


Ta(w) = inf{t:t> 0,.X(t) € 4 


称 Ta 为 A 的 首 中 时 (Hitting Time), 亦 称 为 4° = RR"* 一 4 的 首 出 时 . 
X(Ta) 为 集合 A 的 首 中 点 ， 显然 如 A 为 紧 集 ， 则 X(T4) € 4, 一 般 X(Ts)€ 4. 
若 对 ze R", 有 P{T4 = 0|X(0) = z] = 1, 则 称 z 为 A 的 规则 点 ， 否 则 称 为 A 的 不 
规则 点 . 直观 地 说 ， 作 Brown 运动 的 粒子 从 zx 点 出 发 能 立即 击 中 A 的 点 是 A 的 规则 点 . 
定义 3 设 4 C Ew 为 任 一 开 集 ， 着 函数 h(z)(zx < FE") 在 A 中 连续 ， 24( = 
1,2,.… ,n) 存在 ， 且 满足 Laplace equation: 





2 03h 
Ah = >， Bo = 0. (5.7.21) 
3 $ 


则 称 h(x) 为 调和 函数 . 口 
例 1 设 a 为 任 一 点 ， CC2 为 常数 ， 则 
h(z) = CI+Ca/z 一 oa (n 关 2) 在 了 "一 {a} 中 调和 
h(z)=Gi 二 Csln|z 一 al, (n=2) 在 了 ?一 {a} 中 调和 
本 节 最 后 部 分 要 介绍 Dirichlet 问题 的 概率 表示 . 
设 4 C ER" 开 集 ，n > 2, A 的 边界 记 为 94, 4° = 4 一 94, 设 f(z) 为 在 64 上 的 已 
知 连续 函数 ， 求 h(z) 使 满足 





Ah= 10, Ed?, 
(5.7.22) 


h(z)= f(z), rz €04. 


称 上 述 问题 为 D- 问题 ， 是 Gauss 于 184 年 提出 的 . 1924 年 ， Wiener 提出 了 广义 D- 
问题 ， 1944 年 Kakutani, 1954 年 Doob 又 分 别 发 现 了 D- 问题 的 解 与 BM 的 内 在 联系 . 
D- 问题 是 否 有 人 解 ， 依 赖 于 对 A 的 边界 04 上 的 点 是 否 对 45 规则 . 
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定理 5.7.6 设 A 为 有 界 开 集 ，4 CR", (n> 2 则 D- 问题 (5.7.22) 有 解 的 充 要 条 
件 是 94 的 每 一 点 都 是 4° = Rr - 4 的 规则 点 ; 此 时 解 h(z) 唯一 ， 且 可 表示 为 : 


h(z) = Ef(X(Tsc))], ze 4. (5.7.23) 


其 中 Tac 为 45 的 首 中 时 ， BE. 表示 在 X(0) = x 下 的 条 件 期 望 . 
证 明 : (从 略 ). 
(5.7.23) 式 是 很 有 意义 的 ， 它 将 求解 Laplace 方程 与 n 维 BM 联系 起 来 . 


§ 5.8 用 Monte-Carlo 方法 求解 Laplace 方程 


上 节 介 绍 了 D- 问题 的 概率 表示 ， 本 节 介 绍 用 Monte-Carlo 方法 给 出 这 些 方程 的 数值 
解 ， 为 简单 起 见 ， 仪 以 n= 2 为 例 说 明 . 
求 h(a) = h(z,y) 满足 


| 器 + 名 =0 4=(z,W)e4 a 


h(z,y)=f zr,Y). a= (zy) E04. 


其 中 f(z,y) = f(a) 为 已 知 函 数 ， 4 = (2,V). 

我 们 用 网 格 法 将 (5.8.1) 离散 化 ， 化 为 差分 方程 , 在 A 上 作 步 长 为 h 的 网 格 ， 交 点 称 
为 结 点 . 把 “最 ”接近 边界 94 的 点 构成 94;, 作为 对 应 差分 方程 的 边界 点 ，A 中 其 余 的 
结 点 记 为 4An, 如 5.8.1 图 : (在 本 章 练习 后 ) 





5.8 用 Monte-Carlo 方法 求解 Laplace 方程 


由 微分 方程 的 理论 知 ， (5.8.1) 对 应 的 差分 方程 为 


h(a) = 3h(a1) + h(a2) + h(as)+ h(as)], a€ 4 
h(a)= fla), a EOhn. 


其 中 a1,a2,a3,a4 为 a 的 四 个 相 邻 的 结 点 . 

为 解 (5.8.2), 设计 平面 上 的 随机 游 动 如 下 : 一 质点 M 自 a 4 出 发 作 随机 游 动 ， 
A ee 了, 再 下 一 步 又 同样 以 3 的 概率 到 达 该 点 的 四 邻 点 

如 此 继续 ， 直 至 首次 到 达 04;, 质点 被 吸收 停止 运动 ， 用 

= (z,y) 表示 质点 M 首次 到 达 94) 它 是 一 个 1.v., 以 v(a) 表示 质点 M 从 a 点 出 
2 f(&) 的 数学 期 望 ， 即 v(a) = EB{f(8)| 从 a 出 发 }, 易 证 v(a) < x 存在 (这 里 从 
略 ). 同时 v(a) 是 (5.8.2) 的 解 . 人 

以 Pla,5) 表示 从 a 出 发 的 质点 被 吸收 于 5E 04， 的 概率 ， 知 vE 4 则 





Pla,b)= 3 DD Plai.b). 


4 4 
-> Pla. df() = 37) >》， Plai, DfD) = 3 DD ola). 
3 


LEOAE =1 bEDA, $e 


所 以 v(a) 满足 (5.8.2) 的 前 一 式 . 者 a e 094 则 


= 》 Pla,b)f(D) = f(a). 
bEDA,, 

即 vw(a) 对 4 8.2) 的 后 一 式 也 满足 . 

注意 : (5.8.2) 的 解 v(a) 依赖 于 h, 当 万 充分 小 时 ， (5.8.2) 的 解 v(a) 近似 于 (5.8.1) 
的 解 . 

以 上 就 是 用 随机 模拟 方法 求解 Plaplace equation 的 基本 思想 . 

那么 ， 如 何 求 出 v(a) 的 近似 值 呢 ? 

令 质 点 M 从 a 出 发 按 上 述 规则 作 随 机 游 动 直到 质点 第 一 次 到 达 边 界 94;, 记 下 到 达 
点 的 位 置 5. 重复 上 述 实验 症 次 (m 足够 大 ), 设 第 上 次 的 到 达 点 为 挟 (1< < m), 取 


1 mm 
"(0) = 志和 7 


由 大 数 定理 有 vy 


P( lim vm(a) = v(a))=1. 


?3 一 人 
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及 
BE{vm(a)} = v(a) 


即 (4a) 是 w(a) 的 一 致 估计 与 无 偏 估计 . 
如 果 给 出 误差 精度 5 > 0 及 置信 和 度 a(0 < a < 1), 就 可 以 根据 中 心 极 限定 理 ， 确 定 所 
需 实验 次 数 m, 使 满足 


Pllan(a) —v(a)| <6) =a, a€ hp. 


练习 题 


设 {B(t),t > 0} 为 标准 BM，B(0)=0. X(t)= B(t)j+yt,， Z(t) = B(t) -+tB(1), 
P(x,t) = (2xt)-1/? exp( 一 对 ) ， Ty = inf{ft:t>0,B(t)=a}., 

5.1 

1° 求 cov(B(s),B(t)); 

2。 给 定 Bls) = sz， 求 B(s + 的 条 件 概率 密度 ; 

3° 证 名 = op ; 

4°” V0<s<t<4， 给 定 B(s) =z，B(u) =y， 求 B(t) 的 条 件 概率 密度 ， 并 利 
用 这 个 结果 求 E[B(t)|B(s) = z,B(w) = 四 =? 及 Var[X(t)|B(s)= 2.B(u)= y=?; 

5 V0<Zt<to < <t<tnii， 给 定 B(ti)=zi;，1<i<n,， 求 B(tn+1) 的 条 
件 概 率 密度 ， 及 vz < R' ， 求 


P{B(tn+1) < zB(t1) = £1 ,Bltn) = wn), 
EB{B(tnt1)|B(t1), Bt , B(tn )}, 
Var{B(ty+i)|B(t1) = z1,° ,Bl(ty) = rn}. 
6 V0<tii<hy<tn-i<…< 妇 ， 给 定 B(ti))=zi;，1<i<n。 求 B(tit1) 
的 条 件 概率 密度 函数 ， 从 而 证 明 {B(t),t > 0} 从 道 向 时 间 看 亦 是 马 氏 过 程 。 
7” 求 B(B(2)|B(3)), E(B(2)B(4)|B(3)), E(B(2)B(6)|B(3), B(4), B(5)). 
5.2 令 Y(t) =tB(t), Y(0) 全 0,， W(t) = 1B(ast), a>0, Ut)= (t+1)2(t/(t+1)) 
证 明 {Y(t>0}，{W(t),.t>0}，{0(t),t> 0} 都 是 BM 。 
5.3 令 V(t) = exp(--at)Blexp(2at)] ， 求证 {V(t#),t > 0} 是 平稳 正 态 过 程 〈 称 为 
Ornstein-Uhlenback 过 程 ) 并 求 B(V(s)V(t)) 及 V(t) 扩展 六 兴 放 示 产 
5.4 求 |B(t)|， |mino<s<iB(s)|， M(t) = maxo<s<i(B(s)) 及 65(t) = M(t) 一 B(t) 的 
分 布 。 180 
5.5 求 5(#) = 局 B(s)ds 的 协 方差 、 方 差 及 (5(t1)5(ts)) 的 联合 概率 密度 函数 。 
5.6 求 BE(e5() 及 cou(estta estt) 。 


练习 题 


5.7 Q(t) = BY(t)—t, Vs,t>0, 证 B{Q(s+t)|B(s)} = Q(s) 
5.8 证 明 {|B(t)|t > 0} 与 {6(#),t > 0} 二 过 程 是 等 价 的 ， 且 a 
5.9 令 人 二 eB3(t) ， 试 求 a(z) = lim,_,o Bl2(t+ =n =] 
和 6B(z) = lim; ,0o ED qi ]*|7 (0)=z} 
5.10 P{MI( . > z|B(t) = M(t)} = exp( 一 所 ) 。 提示: 求 在 给 定 6(t) = M(t) 一 
B(t) = 0 下 M(t) 的 条 件 分 布 。 
5.11 设 <0，M= maxi>o X(t), 证 a>0,， P(M >@Q)= exp(2ua)。 
5.12 设 a.8>0, 证 P{B(t) < at+B 对 所 有 t> 0B(0)= zx}= 1-exp[-2a(B8 一 x)](z < 





5.13 设 a,B8>0, 证 P{B(w) <autpB,0<u<18(0)= B(1)=0}=1-exp[-28(B+ 
oj)] 。 

ee 人 B( 去 )-B (每 1)， CE A2x ， 

1° 求 B52 , 忌 Amk|A32j), BE(AnyAngtilA2, A2r41), B(S3|52) 及 BE(S2|S3) ; 

2° 证 EE( J = $(S%+1) 及 E(S,|Sn41) = Siri. 

5.15 对 Vz > 0 ， 及 充分 小 的 >0, 证 P{maxocs<n|X(s)| > z|B(0) = 0} = o(h)。 

5.16 求 P( 了 < 了 Tl<D) 。 提示: 利用 全 概 公式 及 BM 的 对 称 性 。 

5.17 令 T= inf{ft :t+>0,X(t)=a 或 X(t)=-0)， ab>0， -bp<z<a, 记 
g(z) = B(TIX(0) = 2) ， 试 导出 g(z) 满足 的 微分 方程 ， 并 求 出 g(x) 的 表达 式 。 

5.18 记 P(t;z,y) 全 P(x — vy,t) = -ezp(- 艺 六) 

1° 设 f(z) 在 (-x,+%)= Rr 上 一 至 连续， 证 

lim Plt;z,y)f (Wady = f(z). 


t 一 0 SS 


2。 若 flz) 在 Ra 一 致 连续 ， 且 具有 二 阶 一 致 连续 导数 ， 证 
En? {PEs fody = $7) 
5.19 设 zyER" ，lz2= ;1z2， 记 
Plt: m0) = (2r0)- Sexp( -3 ), fa): Rr a. 
1° 若 f(z) 在 Rr 上 一 至 连续， 定义 
nf(e)= Pt: wf)dy 


证 linm_,oTif(z) = fz), TTf(2)= Tf(r), 


2° 者 f(z ) 在 R" 上 有 界 ， “到 和 红 有 只 二 阶 和 时 才 _ 政 和 统 证 
Tf(z)— f(x) lOfAal 


11 和 一 一 一 二 二 


2 
t 一 0 2 Or; 2 
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3° 证 
Co T(2—1) 入 n> 3: 
g (2,Y) | pl: ydt=d 2 i 
0 Co (1 <n < 2). 
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第 六 章 ”连续 参数 马 氏 链 


在 第 三 党 里 ， 我 们 曾 详细 地 讨论 了 离散 参数 马 氏 链 的 有 关 问题 ， 本 章 将 着 重 研究 连 
续 参 数 可 列 状 态 空间 的 马 氏 过 程 . 

仍 记 状态 空间 为 $ = {0,1,2,….} 

定义 ” 设 随 机 过 程 了 = {X(t),t > 0} 对 于 任意 0<to < <…<tn<tntlir ES5, 
0 之 之 n 十 1, 车 对 P{X(t0) = 二 i0, 下 (1) 二 订 ,… ,X(t) 二 计 }>0 就 有 


P{X(tn+1) =in+1|X (to) = io, (t1) = 21， 二 ,X(tn) 过 in} 
=P{X(tn41) = inti|X (tn) = i} 


(6.0.1) 


则 称 {X(t),t > 0} 为 连续 参数 马尔 可 夫 链 (简称 连续 参数 马 氏 链 )， 若 对 于 任意 s,t > 
0,i,7j€5, 有 


称 为 齐 次 马 氏 链 , 本 章 仅 讨论 齐 次 马 氏 链 . 称 P(t) = (Pij(t))(i,7 E 5) 为 转移 概率 矩 
阵 . 易 知 ， 它 满足 

(P.1) P;(t) > 0， IEDS 

(P.2) 名 j i€ES 

(P.3) ep DR s) Pj;(t), st>0, 27E9 


((P.3) 式 通常 称 为 Chapman-Kolmogorov 方程 ) 


(P.4) Pi;(0)= 6i7, 6i=1,6=0(7 AK. 
本 章 还 附加 所 谓 标 准 性 条 件 

(P.5) lim Pij(t) = 6ij. ( 即 Pij(t) 在 原点 连续 ) 
将 (P.3)(P.4)(P.5) 式 写 成 矩阵 形式 : 





P(s+t) = P(s)P(t) 
P(0) = 了 lim P(t) = I (7 为 单位 矩阵 ) 


由 于 P(t) 满足 (P.1)~(P.4), 尤其 满足 附加 连续 性 条 件 (P.5), 使 得 P(t) 有 许多 很 好 的 分 析 
性 质 ， 例 如 有 ee. 

命题 ”车 P(t) = ( Pi) 为 标准 性 转移 概率 矩阵 ， 则 对 任意 给 定 ie 5, Pt) 在 
(0, x) 上 一 至 连续 ， 且 对 7 亦 一 致 成立 


证 ”由 C-K 方程， 对 vi,h>0 


Pij(t+h)— = > Px(h )Prj(t) — Pi;(t)[1 — Pii(h)), 
kzi 
由 此 得 
J 和 = 人 的》 Pirlh )Pij(t) < > Pir(h) = 1— Pis(h), 
ks kzi 
以 及 
Piy(t+h)— Pi(t) > —Pi(t)(1 — Pi(h)) 2 (1— Pia(h)), 
从 而 有 


[Piy(t +h)— P(t)| < 1— Piilh) 


类 似 地 ， 当 如 <0 时 ， 有 |Pij(t) 一 Pij(t+h)| <1- Pi(h). 

对 于 连续 参数 马 氏 链 与 离散 参数 马 氏 链 ， 由 于 它们 都 具有 “ 马 氏 性 ”， 且 状态 空间 均 
为 可 数 集 或 有 限 集 ， 因而 许多 概念 和 性 质 有 相同 或 相似 之 处 . 例如 状态 分 类 ,状态 相通 ， 
平稳 分 布 与 极限 分 布 等 ， 它 们 的 联系 及 确切 定义 将 在 第 6.10 节 介 绍 ， 本 章 将 着 重 讨论 连 
续 参 数 马 氏 链 若 干 比较 特殊 的 问题 . 如 : 转移 率 和 矩阵 (Q 和 窍 阵 ) 及 概率 意义 ; Kolmogorov 
向 前 向 后 微分 方程 ， Fokker-Planck 方程 ; 生 灭 过 程 及 应 用 ; 强 马 氏 性 与 嵌入 马 氏 链 ; 可 
道 马 氏 链 及 在 排队 网 络 中 的 应 用 ; 马 氏 更 新 过 程 . 














$ 6.1 转移 率 矩 阵 -Q 和 矩阵 及 其 概率 意义 


在 离散 参数 MC 中 ， 我 们 知道 由 一 步 转移 概率 和 害 阵 P = (Pij) 可 以 完全 确定 n 步 转 
移 阵 , 即 有 Pl = P" = ea 那么 对 连续 参数 MC, 是 否 有 类 似 的 表达 式 , 即 P(t) = et 
呢 ? 其 中 Q 为 与 1 无 关 的 实数 盾 阵 ， 假 如 上 式 存 在 ， 则 应 有 


P(t)— P(0) _ ee et0 oT 0 
t 人 


一 0 





i 
on 


这 就 提示 我 们 先 要 研究 P(t) 在 t= 0 的 导数 ( 即 变化 率 ) 是 否 存在 的 问题 , 先 看 最 简 
单 的 一 个 例子 ， 再 给 出 一 般 的 绪论. 

例 ” 设 {N(W),t > 0} 为 时 齐 Poison 过 程 ， 参 数 为 和. 因 它 是 独立 增 量 过 程 ， 易 知 它 
是 连续 参数 MC, 则 


Pij(t) = P{N(s +t)=jIN(s)=i} = P{N(s+t)— N(s) =j— 
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-| nd 


0， 0<j<i 





6.1 ”转移 率 矩 阵 -Q 抢 阵 及 其 概率 意义 


故 Pi(t) 存在 , 且 


—A,， 7=i>0 
qj 人 SP(0)=4 h j=itli>0 
0， 其它. 


若 令 @ = (gij), 可 以 验证 P(t) 满足 : P(t) = e'%. 

对 于 一 般 马 氏 链 ， 有 以 下 

定理 6.1.1 对 ie 5 极限 

4 = gS lim (6.1.1) 

存在 ， 但 可 能 是 无 限 . 

证 首先 ， 由 标准 性 条 件 (Jim Pis(t) = 1) 可 知 ， 对 任意 固定 1 > 0, 当 ” es 
有 Pi(t/n) > 0, 再 由 C-K 方程 (P (十 让 二 Dres Pin(s)Pri(t) 之 Pi(s ), 可 得 : 
Pi(t) > (Pi(t/n))” > 0, 即 > 0, 上 > 0, 故 可 以 定义 9$(t) = Be ee 
限 ， 且 由 于 Pi(s 十) > Pii(s)Pi(t), 有 $s 十 们 < 9(s) 十 $(). 令 gi = suptso 时 ,下 面 要 
证 人 极限 存在 ， ee 显然 


t 
0<g;<%, limsup < < gi. 
t 一 0 


所 以 以 下 只 须 证 下 极限 limint 2 ) > 0i， 
任 给 a 0<e<h, 得 


G0) nh GD) $e) 
Ei 





注意 到 ， 当 下 一 0 时 ，< 一 0 芋 一 1 We) = 一 也 Pi(e) 一 0, 故 侍 < limipf 分 1, 得 
on A) ,= lim ?0 
< liminf 7, 从 而 @ = lim $0 

由 $(t) 定义 得 


1 一 er2 y(t) 
= lim . 一 一 
t 一 0 . t 一 0 p(t) i 

















=—di: 








定理 6.1.2 对 i,i7€ 56.7 六 i 极限 
Pi;(t) 
t 





Qij < 已;(0) = lim (6.1.2) 
存在 且 有 限 . 1 人 

证 ”由 标准 性 条 件 ， 对 任意 0 < ec < 让 存在 0<6<1 使 当 0 < t+ < 5 时， 有 
Pi(t) >1-e, P(t} >1-e, Pi(t)<e. 


第 六 章 ”连续 参数 马 氏 链 


下 面 要 证 : 对 任意 0<h<t, 只 要 t< 6, 则 有 


本 
人 n 1— 3e (9) 


其 中 取 n= [ 刘 ( 即 ”为 不 超过 去 的 最 大 整数 ), 记 





jPir(h) = Pir(h) 
jPir (mh) = 之 jPir((m — 1)h) Pr(h). 
其 中 ;Pi (mh) 表示 从 i 出 发 ， 在 时 刻 h,2h,… , (m 一 1)h 未 到 达 ; 且 在 mh 时 刻 到 达 
的 概率 ， 当 有 hh<t<6 时 ， 有 


1— Pi(t) = > Pr(t) 


Ei 
>P;;(t) 


n 


> 2; Pi;(mh)P;;(t — mh) 


>(1—&) De iPi; (mh). 
A 








得 
-se Pi;(mh) < 
又 由 
?2 一 工 
Pi(mh) = jyPi(mh)+ > 7 (Ih) Pi((m — 1)h), 
1=1 
得 
m—1 E 
jPi(mh) > Pi(mh) -> jPij( I 
这 
故 


> 》 jyPil(m— Dh) Pj;(h) P(t — mh) 


m= 二 1 


>n ( 一 ce Te) Pi;(h)(1—e) 
>n(1— 3e)P;;(h). 


a) 式 得 证 ， (a) 式 两 边 除 以 h( 注 意 ， 当 h 一 0 遇 6 nh 一 ,得 


Pii(h) 1 P(t) 
: < i 
MD 





6.1 ”转移 率 矩 阵 -Q 抢 阵 及 其 概率 意义 























再 令 t 一 0, 有 

Pi;(h) 区 

S < ; 

ee limint a 

再 令 上 一 0, 定理 得 证 . 
推论 1 对 任意 ie5 
0< >》 dj (6.1.3) 
jz 


证 由 P(t) 和 j=1, 得 二 B40 = ee 
令 1 一 i 上 上 趟 两 边 取 下 杰 限 ， 并 由 Fatou 引 理 及 (6.1.1), (6.1.2) 得 
g= lm 三 > | = 》 di 


#1 了 天 1 


注意 到 当 5 为 有 限 集 时 ， 上 式 不 等 式 化 为 等 式 ， 故 有 
推论 2 当 5 为 有 限 状 态 空间 时 ， Vi < 5, 有 

















0 < Dg = 0, (6.1.4) 
了 天 1 


记 Q@ = (gj)( 其 中 gi = 一 qi), 称 9 为 {X(t),t> 0} 的 转移 率 矩 阵 (或 称 密度 矩阵 ). 
若 转 移 率 矩阵 8 = (qij) 满足 : Vie 5， pe ce 称 8 为 保守 . 


由 推论 2 知 ， 当 5 为 有 限 集 时 ， Q 必 保守 
为 了 解释 Q = (qij) 的 概率 意义 ， 我 们 令 


ni =inf{t:t>0,X(t) FX(0)}. 


71 表示 运 留 在 初始 状态 的 时 间 (或 首次 离开 初始 状态 的 时 间 ). 7 的 概率 特性 与 CQ = (gi)) 
有 何 关系 呢 ? 
定理 6.1.3” 设 马 氏 链 X = {X(t),t > 0} 轨道 右 连 续 ， 则 对 ;< 5, t > 0, 有 


P(ni > tIX(0)=72) = exp(—qit). (6.1.5) 


证 ”由 轨道 右 连续 ， 得 





P(ni > txX(0) = = PX) =60 <u <tX(0) = 
计生 太 同 各 和 村 各 化 六 国庆 十 什 后 和 2 


BE{w: XW)=i0<u = 站 {w :了 (4u) = 让 . 


Oc<u<t 


第 六 章 ”连续 参数 马 氏 链 


将 [0,4] 区 间 2* 等 分 ， 记 
An Sw:x (六 =%,k=0,1,2,... ,2"} 


-站 ex( 去 本 i 


因为 4n+1 区 An, 所 以 记 4 全 = A An = 二 im An. 


显然 BC 4. 还 可 证 明 4 [至 多 差 一 个 0 测 集 ) 所 以 4AB=(A\B)U(B\A4)= 
$. 故 


P(ni > tIX(0)=7) =P(X(u) =i,0<wu<tX(0)=2) 


=P(B|IX(0) = 
=P(AIX(0) = 
= lim P(A,|lX(0)=2) 


= lim P (x (¥ 了 一 也 大 三 01 2 ,2"|X(0) a 
t NAN2 
= ,im (2 (去 )) ( 马 氏 性 ) 


二 ln exp 人 > ln P; (去) } 
ee 
= lim | 
n—00 di 


二 exp( 一 qi;t).( 因 为 由 gq; 的 定义 知 Pi;(t) = 1 一 gi 十 o((t)) 口 
这 说 明 系 统 逗 留 在 X(0) = i 状态 的 时 间 4 是 服从 参数 为 q; 的 指数 分 布 的 ， 显 然 
Elrn|X(0) = 让 = gq7. 


可 见 ， gq; 决定 了 过 程 {X(t),t > 0} 停留 在 X(0) = :的 平均 逗留 时 间 ， 它 刻画 了 过 程 从 :; 
出 发 的 转移 速率 ， 分 三 种 情形 : 
1°” g; 二 0, 称 ;i 为 吸收 状态 , 这 是 因为 (mi = ~%) = i (n> mh) Pl(n = IX(0)= 
= lm P(m >nlX(0)=0)=1. 即 从 ; 出发， 过程 以 概率 1 永远 停留 在 i 状态 . 
2。g = x, 称 ;为 瞬时 状态 , 此 时 Pr = 0|X(0) = 引 = Jlim P[n < $IX(0) = = 
1, 这 说 明 X 在 i 状态 几乎 不 停留 立即 跳 到 别 的 状态 . 
3”0<gq<~, 称 i 为 逗留 状态 这 时 过 称 您 留 在 状态 i 若干 时 间 后 跳 到 别 的 状 
态 ， 停 留 时 间 服 从 指数 分 布 . 
定理 6.1.4 ” 设 马 氏 链 XX = {X(t),t > 0} 轨道 右 连续 ， 且 0 < gq; < x. 则 对 t+ > 0， 








6.1 ”转移 率 矩 阵 -Q 抢 阵 及 其 概率 意义 


j 关 i 有 
Plni < t,X(n) = jIX(0) = 让 = 0 [1 — exp(—git)]. (6.1.6) 
PIX(ni) = j|X(0) = 引 = (6.1.7) 
证 ”先进 行事 件 分 解 ， 


(nxn)=D)= () (m= X(n)=)) 
O<u<t 


与 定理 6.1.3 的 证 明 类 似 ， 下面 也 是 采用 将 不 可 列 事件 化 为 可 列 事件 运算 . 令 


B= {rn <t,X(0)=i,X(n)=j), 4»= J {XE) = 00 uch XE) = 
O<k<2° 
因为 4 C 4 所 以 4 人 U 4 = lim 4,, 且 BUN = 4, 其 中 NN 是 概率 为 0 的 事 
n= 二 1 人 一 CO 


件 ， 即 P(N)= 
由 此 得 


PIm <1,X(n)= 7|X(0) = 
= in D2 x (wt ) 70<v<h (去 1 -5O= 引 
2 KR_1 
= lira $ (a (去 )) J (去 ) ( 马 氏 性 ) 
生生 
和 去 


= (Pii(t/2°))> ] | (由 (6.1.1) 及 (6.1.2) 式 ) 


=[1 — exp(—gqit)]qij /Qi. 


(6.1.6) 式 得 证 ， 上 式 中 令 t 一 oo 即 得 (6.1.7). 口 
推论 ” 若 马 氏 过 程 {X(t),t > 0} 轨道 右 连续 ， 且 Q = (qi; ) 为 保守 的 ， 0 < gw < cc， 
1E 5, 则 关于 X(0)= i 与 了 (i) 条 件 独立 . 
证 由 (6.1.5) ~ (6.1.7) 式 , 对 Vi>0,j7eE5, 有 Pln<t,X(n)= jlX(0)=)= 
Pn <tX(0) = = P(X(n) = j|X(0) =) 及 保守 性 ， 即 得 与 XX(n4) 关 于 X(0)=3 
条 件 独立 . 
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§ 6.2 Kolmogorov 向 前 向 后 微分 方程 


第 六 章 ”连续 参数 马 氏 链 


从 上 节 讨 论 可 知 ， 由 马 氏 链 碟 = {X(t),t > 0} 的 转移 概率 和 矩阵 P(t) = (Pij(#)) 可 
唯一 地 决定 其 密度 矩阵 P'(0) = @ = (gi), 很 自然 地 我 们 要 问 : 反之 ， 给 定 一 个 密度 矩 
阵 8 = (gi;j), 是 否 可 唯一 地 决定 一 转移 概率 矩阵 P(t) = (Pij(t)), 使 其 满足 P(t) 的 性 质 
(P.1)~(P.5), 且 P'(0) =Q@ ?为 此 ,我们 先 引 入 若干 概念， 然后 着 重 讨论 在 5 为 有 限 集 时 
P(t) 与 @ 的 关系 ， 并 简介 几 种 由 @ 求 P(t) 的 方法 . 

定义 ”一 个 矩阵 8 = (qij) 称 为 @ 矩阵 , 如 满足 : 

1 ” di 全 一 qi < 0( 可 以 取 ->c) ; 

2° 0<gj;<+o%0,7zF7; 

3° 各 Qij < gi: 

称 Q 郊 阵 为 保守 ,车 Vie 3， 入 叶 < 品 


由 上 节 可 知 ， 当 P(t) 为 标准 转移 隆 时 ， 其 密度 矩阵 P'(0) = (Pi;(0))= (qj) 为 8@ 甜 
阵 ， 且 当 5 为 有 限 集 时 ， P'(0) 为 保守 9 和 矩阵. 

定义 ”对 给 定 8 矩阵 8 = (qij), 若 有 马 氏 链 XX = {X(t),t > 0} 的 转移 阵 P(t) = 

)) 满足 P'(t)lt-o = 9, 则 称 此 马 氏 链 X 为 (8 矩阵 8 的 )Q 过 程 . 

定理 6.2.1 设 MC{X(t),t> 0}, 了 P(t) = (Pij()), 8 = (qij) = 了 P'(0). 当 5 为 有 限 集 
时 ， 有 














P'(t) = QP(t) (6.2.2) 
证 ”由 C-K 方 程 P(t+h)= P(t)P(h) = P(h)P(t), 有 


P(t+h)— PE) P(h) I] FPR)-I 
| > | > | me (6.2.3) 





令 h 一 0, 两边 取 极 限 ， 注 意 到 3 为 有 限 集 ， 即 得 (6.2.1) (6.2.2). 吕 
(6.2.1) 和 (6.2.2) 式 称 为 氏 向 前 向 后 微分 方程 ， 其 分 量 形式 





P(t) = -gj Pij(t) + > Pin(t)any (6.2.1a) 
£2 

P(t) = —giPij(t) + > gin Pry(t) (6.2.1a) 
R21 


以 上 给 出 5 有 限 集 时 ， P(t) 与 @ 的 关系 . 当 Q = (gqij) 为 已 知 的 保守 8 和 矩阵， 是 
3 为 有 限 集 时 容易 验证 常 微分 方程 组 














P(0)= I 
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6.2 Kolmogorov 向 前 向 后 微分 方程 


存在 满足 (P.1)~(P.5) 条 件 的 转移 概率 矩阵 的 唯一 解 
t 
P(t) = eQt 全 > po 


同时 ， P'(0) = Q. 

对 于 3 为 可 数 状 态 时 ， 向 前 方程 与 向 后 方程 不 一 定 成 立 ， 但 由 (6.2.3) 式 及 Fatou 引 
理 ， 有 

P'(t) > P(t)Q, P'(t) > QP(t). 

定理 6.2.2 当 5 可 数 ，Q = (gq;)) 为 保守 @ 矩阵 时 ， 则 向 后 方程 P'(t) = QP(t) 成 
立 . 

为 了 证 明 该 定理 ， 先 不 加 证 明 的 给 出 一 个 引 理 

引 理 设 f(z) 为 (a,5) 上 的 连续 函数 ， 且 f(x) 在 (a,5) 中 有 连续 的 右 导 数 ， 则 f(z) 
在 (a,5) 上 可 导 . 

定理 6.2.2 的 证 明 由 C-K 方程 ，h >0 . 











Di 十 有 一 Di 的 _ -人 (6.2.4) 
h “各 
由 Fatou 引 理 ， 有 
Dik 
eS prj(t) > 2 (6.2.5) 
另 一 方面 , 对 N>i 
pix( pir(h Pet 
lim 人 es (t) <limsup [ J ny ( +- 》， 
h—>0+ ho0t FARECN E>N 
=limsup [ i Pxj(t) 十 2 Wi 一 
ho0t < EEC<N 
> ， pwr Yagi 
有 < 大 < NT 
令 X 一 so, 由 保守 性 得 
limsup 和 0 ——— prj(t) < >》， qixprj(t (6.2.6) 
h—0+ 和 kz 


由 (6.2.5) 及 (6.2.6) 得 





lim sup 下 = prj(t) = >》, Qi prj (t). 
10+ p27 有 到; 

再 由 (6.2.4) 得 

， ij(t 二 +h ij (t) 

jim 2 - = Dott) 


h—0+ 
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仍 由 保守 性 知 ， 上 式 右 边 的 级 数 关于 t 一 致 收敛 ， 因 此 是 t 的 连续 函数 ， 故 由 引 理 的 定 
理 . 
让 我 们 考虑 X(t) 在 t 时 刻 的 概率 分 布 ， 记 P(t) = P(X(t) = 站), 显然 





= 》 Pi(0)P;(t) 
i€S 
我 们 有 
定理 6.2.3 当 5 为 有 限 集 时 ， 下 列 Fokker-Planck 方程 成 立 
P(t) = -P(t)g; + > 及 (gx (6.2.7) 
kz 





证 ”由 (6.2.1a) 两 边 同 乘 以 P;(0) 并 对 i 求 和 即 得 (6.2.7) 式 . 

为 了 解决 具体 问题 ， 先 回顾 一 下 平稳 分 布 和 极限 分 布 的 概念 . 若 一 概率 分 布 {7j, 7 E 
5} 满足 7) = 2 TiPij(t)(Vi € 5,t > 0), 则 称 {j,i € 5} 为 平稳 分 布 . 与 离散 时 间 MC 有 
相 类 似 的 结果 : 当 马 氏 链 X= {X(t),t > 0} 为 不 可 约 遍历 链 时 ， 则 必 存 在 唯一 的 平稳 分 
布 {7j,7 ES}, 且 它 就 等 于 极限 分 布 即 7 = P (7j€ 5). 从 而 有 以 下 定理 . 

定理 6.2.4 当 5 为 有 限 集 且 为 不 可 约 链 时 ， 其 平稳 分 布 x = (7j, 7 € S$) 存在 ， 且 满 
足 : jgqj = Dr zj NEARj: 

证 明 由 于 7 = linmn < Pij(t), 对 (6.2.4) 式 两 边 对 t 取 极限 , 左边 = limw_, 二 
P; = 二 T/ 二 = 0, 右 边 = - T797 十 Dz NEARI: 从 而 TjQ; 二 Dz TRGdR7 

有 了 以 上 理论 上 的 准备 , 我 们 可 以 进一步 讨论 由 密度 矩阵 8 求解 转移 概率 矩阵 a 
的 几 种 方法 . 

1” 当 5 有 限时 ， 我 们 可 以 利用 分 析 的 方法 求解 向 前 向 后 微分 方程 . 

例 1 设 某 触 发 器 状态 只 有 二 个 ，5 = {0,1}, “ 0” 表示 工作 态 ，“ 1 ”表示 失效 
态 ， X(t) 表示 t 时 触发 器 状态 .已 知 其 状态 转移 具有 马 氏 性 . 即 了 = {X(t),t > 0} 为 
MC, § Poi(t) = M+o(t), Pio(lt) = pt + olt), 得 














试 求 P(t) = (Pij())( 设 Po(0) = 11). 
解 a 


经 适当 简化 后 有 
uPlo(t) + APlolt) =0. 


6.2 Kolmogorov 向 前 向 后 微分 方程 


两 边 积分 得 
KPoolt) 一 上 十 APiolt) "0; 


再 由 初始 条 件 Poo(0) = 1, Pio(0) = 0, 于 是 有 


a 
Poo(0)= |， 


采用 解 常 系数 微分 方程 常用 的 常数 变易 法 ， 解 之 得 : 











KH A tn 
Poo(t) 二 一 一 十 一 一 4， 
bott) EE 十 Re 
从 而 
kh HA) 
Piolt 一 人 
10(t) De a 
入 入 
DE (Mt 
ob1(t) pr ， 
入 及 
P = 一 (ATAJt 
11(t) ee 


再 由 Po(0) = P(X(0)=0)=1, 得 
a 入 








Polt) = Po(0) Poolt) = Er 和 
入 入 
P(t)= P(t)=———— 一 (AAAOt 
1 u(t) 入 十 以 和 二 1 


再 求 平稳 分 布 (也 是 极限 分 布 ), 得 : 


Po = lim Poolt) A 
t 一 co 


二 十 内 
及 
P lim Po1(t) 
= lim es 
1 = ,ln fol 二 下 


2” 当 5 为 可 列 集 时 ， 才 已 知 8 = (gqij), 欲求 满足 向 前 向 后 方程 P(t) 的 解 ， 可 用 概 
率 构 造 法 求 之 ， 这 里 仅 以 8 符 阵 为 保守 时 为 例 ， 求 解 向 后 方程 . 令 


nPij(t) = PI[X(w) 在 u & [0,4] 恰 有 n 次 跳 具 ， 且 X(t) = j|X(0) = 


则 首先 易 得 


oP;j;(t) = 6ije i, 


再 由 人 金 概率 公式 可 求 递 推 关系 : 
,Pi(OD =PIn + 1 次 跳 到 j|X(0) = 了 


小 
3 》 RAP(X(TH) = hm SHXO0) =in=s, X(n)= dP(n <s, 
0 
( 


X(n1) = 十 X(0) = 让 (对 元 及 X(ni) 用 全 概率 公式 ) 
= Dor 了 X(T,,) = <t—s|lX(0 由 = 月 如， “Qi€ es 


(利用 $ 6.4 中 强 马 氏 性 ) 
-| Dt )nPri(t— s)qire 2 ds 


= 区 5 nPrj(t — s)qire 2 ds 
( 0 


以 上 递 推 式 也 可 有 如 下 直观 概率 解释 : 
. 
mPal) = DE#0 f (en) (ein ds) (a Palt—s)) 
( 


其 中 ， (es) 表示 在 ; 状态 去 留 时 间 s, (gx ds) 表示 在 ds 时 间 内 发 生 跳 牙 的 概率 (8 
PK) = jn < XO0) = 习 = 旦 (oray= 吾 (Gea)= 国 daiPu 人 - 
表示 在 余下 时 间 (+ 5) 内 发 生 ”次 跳 胸 ， 最 终 转 移 到 ; 的 概率 ， 最 后 ， 对 上 求 和 ， 对 时 
间 s 从 0 到 t 积 

有 以 上 递 推 公式 后 ， 令 方 伯 = 沁 P(t), 则 可 验证 F(t) = ( 方 (0) 是 向 后 方程 的 
最 小 非 负 解 ， 这 启示 我 们 : 可 以 籍 助 于 概率 方法 求 某 一 类 微分 方程 的 解 

3 ”用 拉 普 拉 斯 (Laplace) 变换 求解 向 前 向 后 微分 方程 ， 它 将 这 些 方程 转化 成 代数 方 
程 , 以 便于 用 代数 方法 作 处 理 . 为 此 首先 叙述 一 些 必需 的 有 关 拉 普 拉 斯 变换 的 基本 知识 . 

引 理 6.2.5 设 [0,x] 上 的 函数 f(t) 的 拉 普 拉 斯 变换 为 $( 和 ), 则 


o0= /。 -alt-s) f(s)ds, g>0 





的 拉 普 拉 斯 变换 为 0. 
证 直接 计算 即 可 : 


Co t co Co 
/ et «|/ eItTs) f(s) ds 二 es f(s) a f Ce 一 (AT9 氏 dt 
0 0 0 3 


6.2 Kolmogorov 向 前 向 后 微分 方程 





在 上 述 计 算 过 程 中 以 |f(s)| 代 f(s), 由 J0 e-**|f(s)| ds < so 可 知 ， 在 计算 中 交换 积分 号 
是 可 行 的 ， 且 人 etlg(t)| dt < ec. OO 

对 于 转移 概率 窍 阵 P(), 由 于 Pij(t) 是 [0,%) 上 的 有 界 连续 函数 ， 它 有 拉 普 拉 斯 变 
换 ， 记 为 


m=/ etP,;(t) dt, 入 > 0， 2 7 E 9. 


必 


及 R(A) = (ri(A))， 入 > 0，27 E 9. 


它们 称 作 转 移 概率 函数 的 预 解 式 , 有 以 下 性 质 : 
定理 6.2.5 ”对 一 切 ?7 ES 及 和 >0 
(1) mA) > 0; 
(2) 和 2 7i(A) 三 了 
了 ES 
(3) ri(N) -Ti(W) + A- 总 Tik(AJ7x27CAD) = 0; 
(4) im Arij(A) = 6ij. 
或 写成 以 下 简洁 的 矩阵 形式 : 
(1’) RN)>0: 
(2) AR(N)e = el(e=(1,1,...,1)7); 
(3) ROAA)- RA) + A- AROARGE) = 0: 
(4’) im AR(M) =I. 
称 (1')~(4") 为 预 解 方 程 . 
证 (1), (2) 容易 证 ， 留 给 读者 练习 ， 这 里 只 证 (3) 与 (4). 
3) 可 由 C-K 方程 用 如 下 方法 推 得 . 


[ eMNtHs) p(tts) dt ds = 站 J 人 > Pir(t)Prjy(s) dtds = Ori Mray(p). 
0 Jo 0 Jo x 





(6.2.8) 
现在 不 妨 设 和 > /. 注意 到 
eH*Pij(t+ s)ds= eH“ tp (u) du 
a/ cpitode- 人 e 人 Pi du} 
0 195 


吕 
-ee 有 (du 
0 


我 们 有 


Do Do Co De 
人 / et psltt ytds= 上 eat f e Pij(t + s)ds 
0 Jo 0 0 
Co 
= 的 人 1 “-/ 。 ce 人 Pi ou / e 人 人 
u 


TD) fa du 
入 一 以 .| 5 sg 


| 
= tN) -rp)}. 





(6.2.9) 
易 见 ， 若 4 > 和 , 我 们 可 得 到 同样 的 结果 . 有 (6.2.8) 和 (6.2.9) 式 即 得 (3) 
4) 可 由 连续 性 条 件 推 得 ， 事 实 上 ， 
rj ee 于 et (dt = 人 er u/ A) du, 
对 人 二 :| P(t) dt / 。 Pj(u/ Nd 
dm Pi;(u/A) = 6i), | ce “dwu=1, 
由 控制 收敛 定理 即 得 (4). 口 
下 面 引 入 向 后 方程 的 积分 形式 : 
Pij(t) = 6ije- t+ >/ eilt-s) gi Py(s) ds. (6.2.10) 


EE 





实际 上 ， 由 向 后 方程 P:;(t) = 2 ir Peslt), 可 得 : 


t 
Pj; (t) Nog bijegit 二 | d[LPi(sje-2tt- 引 ] 
仁 
t 
| e+ qie— i(t-*) p(s) ds 
0 


=/。 (giaPij(s) + > gin Prj(s)) yat fC gii)e W(t) Pi,(s) ds 
0 


kzi 


3 TT gn Prj(s) ds. 


Wet 


即 得 (6.2.8). 对 其 取 拉 普 拉 斯 变换 ， 利 用 引 理 (6.2.4), 得 到 预 解 式 满足 的 向 后 方程 (线性 
代数 方程 组 ) 








天 O07 罗 
人 ry (N+ 下 A>0, iies. 


类 似 ， 也 可 得 到 向 前 方程 的 积分 形式 和 向 前 线性 供 数 方程 组 ， 这样 ， 解 微分 方程 就 转化 
成 求解 线性 代数 方程 组 了 . 


6.3 ” 生 灭 过 程 


§ 6.3” 生 灭 过 程 


这 一 节 转 到 讨论 一 类 特殊 的 马 氏 链 一 生 灭 过 程 , 它 在 排队 系统 , 可靠 性 理论 , 生物 ， 
医学 ， 经 济 管理 , 物理， 通讯， 交通 等 方面 有 广泛 的 应 用 . 而 且 它 的 理论 成 果 较 为 系统 ， 
成 熟 和 深入 . 

定义 ” 设 马 氏 链 久 = {XX(#),t > 0}, 状态 空间 5 = {0,1,2,… ,} 着 P(t) = (P(t) 
满足 : 当 充分 小 时 ， 








Piiti(h) = Mh + o(h), A>0,i>0 
Pii_i(h) = pih + o(h), Li > 0,i>1 
Pi(h)=1— (N+phdh+o(h), yuo=0,i>0 (6.3.1) 
> Pj;(h)= o(h), i>0. 
|j—il>2 
称 X 为 生 灭 过 程 . 口 


(6.3.1) 表示 ， 当 h 充分 小 时 ， 状 态 转 移 有 三 种 可 能 : i 一 i 十 1, 2 一 2 一 1 一 这 
个 特性 是 许多 生物 群体 ， 粒 子 裂变 ， 信 号 计数 等 的 共同 特点 ， 因 而 可 作为 这 一 类 物理 自 
然 现象 的 数学 模型 . 
由 (6.3.1) 式 知 : qi = (Ni 二 10), giitl 三 和 ,gii-1 三 Ji, 其它 qi =0, 即 Q= (gij) 表 








示 为 : 
—Ao Ao 0 0 0 
Hi 一 (Ai 十 AD) Al 0 0 
Q@=| 0 i (6.3.2) 
: 0 Hi (Ai 十 Ai) Ai 0 
0 
0 


形 如 (6.3.2) 的 矩阵 ， 称 作 生 灭 过 程 9 宕 阵 ， 显然 ， 它 是 保守 8 怎 阵 ， 且 在 和 ; > 0(i > 0)， 
Mi >00>1 时 有;i-1c2ic2i+10>1), 可知 对 Vi,ij€5,ioj, 从 而 这 样 的 生 灭 过 
程 是 不 可 约 链 ， 同 时 有 以 下 

定理 6.3.1 若 蕊 为 生 灭 过 程 ， 则 P(t), 8 满足 向 前 向 后 方程 : 





P(t) = -P(t + 0) P10 N+ Piyri(t) pyr (6.3.3) 





P(t) = —Nit pi P(t) + NPitni(t) + piPi-13(t) (6.3.4) 


且 {Pj(t),7 €E 5} 满足 Fokker-Planck 方程 : 


(6.3.5) 


P(t) = —Po(t) No + Pt) 
PI(t) = -P(A tH) + P(t)N-1 + Piti(t) y+r1: 


证 ” 先 证 (6.3.3). 
由 C-K 方程 及 (6.3.1), 有 
BED pC | p10) 


Pitij(h 
h 


1 
二 全 + Folh) 


令 有 一 0 即 得 (6.3.3). 类 似 可 证 (6.3.4). 由 (6.3.3) 两 边 乘 以 P.(0) 再 对 i 求 和 ， 并 注意 到 
Pj(t) = > BR, 即 得 (6.3.5). 品 
?EC 


如 碟 的 极限 分 布 存在 ， 即 P= lim Pi(t) 存在 ， 且 与 无 关 (Vi,j < 5), 则 有 
Pit) 一 0(t 一 sc) 因此 由 (6.3.5), 令 t 一 oo, 两 边 取 极限 而 得 








一 Ao 了 十 P=0 
i (6.3.6) 
-N+tH)P tN-iP-1+t HtiPiti=0 7>1 
解 (6.3.6) 代数 方程 ， 得 
入 AoA = 
P= 2P,, 2 二 oP, ， 和 M1 0， 
1 H1H2 H1H2 AAA 
RES 
oo 一 工 
P= (: Da | 
R21 MIM He 
可 知 ， 当 
入 OA 入 人 一 
lo (6.3.7) 
j=1 HIA2 上 


时 ，0<Po<1, 且 0< P<1(k>1). 因此 ，(6.3.7) 式 成 立 是 (6.3.6) 代数 方程 存在 唯 
一 的 极限 分 布 解 的 充 要 条 件 . 进一步 有 以 下 结论 

定理 6.3.2 设 X= {X(t),t> 0]} 为 生 灭 过 程 ，X > 0,i>0, p>0,i>1, (p=0), 
则 X 存在 唯一 的 平稳 分 布 ( 它 等 于 极限 分 布 ) 的 充 要 条 件 为 (6.3.7) 式 成 立 ， 即 


AOA Ap1 


KH1H2 人 


< co 


三 198 


a 
RS ANON A A 
这 (: | 和 ' Pe = pop Polk > 1). 


6.3 ” 生 灭 过 程 


证 ”因为 (6.3.7) 式 成 立 是 (6.3.6) 代数 方程 存在 唯一 的 极限 分 布 解 的 充 要 条 件 ， 再 
由 第 三 章 定理 3.3.6 : “极限 分 布 存在 是 遍历 的 充 要 条 件 ”， 所 以 (6.3.7) 式 成 立 是 遍历 的 
充 要 条 件 . 又 因为 生 灭 过 程 是 不 可 约 链 ， 且 由 第 三 章 定 理 3.5.6 : “不 可 约 遍 历 链 充 要 条 
件 是 存在 平稳 分 布 , 且 就 是 极限 分 布 "， 可知 (6.3.7) 式 成 立 是 六 存在 唯一 的 平稳 分 布 ( 即 
为 极限 分 布 ) 的 充 要 条 件 . 

通常 在 排队 论 中 ， 车 存在 极限 分 布 ， 且 等 于 平稳 分 布 ， 称 此 时 系统 处 于 统计 平衡 , 简 
称 稳 态 . 

例 1 M/M/1 排队 系统 ” 即 顾客 到 达 流 是 参数 为 的 Poisson 流 ， 每 个 顾客 的 服务 
时 间 独 立 同 分 布 ， 服 从 参数 为 / 的 指数 分 布 且 与 顾客 到 达 时 间 相 互 独立 ， 且 只 有 一 个 服 
务 员 . 记 X(t) 表示 系统 t 时 刻 顾客 数 ， 易 知 {X(t),t > 0} 为 生 灭 过 程 ， Xi = AG > 0)， 


ee 显然 ， 当 p= 祈 <1 时， 0<P=1-<%, 是 < 二 一 


(站 (4 一 2) < =, 因此 得 出 : 对 于 M/M/1 排队 系统 ， 当 p= 》 < 1 时 ， 过 程 存在 唯一 


平稳 分 布 {Pj,j E 5), 当 t 一 十 x 时 ，P(t) 一 已 . 以 下 求 稳 态 下 的 几 个 数量 指标 : 
1 ”系统 的 平均 队长 


= in BX = ip = D(A) ( >) ee = ee 

















. ER S | 
lm BIX*(t)] = >,% B=p | Er 


有 





2 ”平均 等 待 的 顾客 数 


3 ”等 待 时 间 分 布 与 平均 等 待 时 间 
以 所 表示 稳 态 时 ee 此 时 是 一 平稳 过 程 ) 顾客 
排队 等 待 的 时 间 ， 记 G(x) = P(T < z), 当 z=0 时 


en 





2 > 0 时， 由 人 金 概 公 式 
G(z) = > P(X(s)=n)P(T, < z|X(s) = 7) 
199 ~、 
=P(T, < z,X(s)=0)+ ,PPT, < wlX(s)=n). 
我 三 二 


第 六 章 ”连续 参数 马 氏 链 


在 和 (s) = nn 条件 下 ， 应 等 于 (”- 1) 个 顾客 服务 时 间 之 和 再 加 上 正在 服务 的 顾客 的 
剩余 服务 时 间 ， 再 由 指数 分 布 的 无 记忆 性 ， 知 P(T < z|X(s) = n) 应 等 于 参数 为 / 的 指 
数 分 布 的 n 重 卷 积 ， 即 


fp 





和 Mf ODT wm 
ow=(1-2)+(1-2)/ 人 HY du 


平均 等 待 时 间 W, = BT = 2 

4 ”费用 最 优 的 参数 

考虑 最 优 服务 率 1 的 问题 ， 设 每 一 顾客 在 系统 一 小 时 损失 C1 元 ， 服 务 机构 每 小 时 
费用 正比 于 1, 比例 系数 为 C2, 记 R(1) 为 每 小 时 费用 ， 则 系统 平均 每 小 时 费用 损失 为 
ER(1) = FxC1+ Co/ 如 何 选取 最 优 的 心 , 使 BR(*) = minBR(j), 显然 由 人 一 0， 


可 得 
人 三 入 十 \/ 2 

例 2 一 台大 型 计算 机 系统 ， 有 m 个 终端 ， 假 定 可 能 的 用 户 有 无 限 多 . 在 (tt 十 用 
内 又 有 一 用 户 要 求 使 用 终端 的 概率 为 Ah + o(h)( 和 > 0,h 充 分 小 ), 并 与 正在 使 用 的 用 户 
无 关 . 此 时 若 有 空闲 终端 ， 则 它 占 用 一 终端 ; 否则 ， 因 终端 占 满 ， 请 求 使 用 的 用 户 被 取 
消 . 又 假定 每 一 个 在 上 时 刻 正 在 占用 一 终端 ， 在 (t,t 十 h) 内 使 用 完毕 而 空 出 的 概率 为 
Lh 十 ol(h). 各 用 户 正在 占用 与 结束 之 间 相 互 独立 . 设 和 表 t 时刻 正在 占用 的 终端 数 ， 
易 验 证 {X(t),t > 0} 为 MC, 且 是 有 限 状 态 生 灭 过 程 ， 5 = {0,1,2,… ,m}. 依 题 意 : 





Psi(h) =Ah+oh), 0<i<m-l. 
Pii_i(h)=iuh+o(h), 1 <i<m. 

pi) Lo Otel 
Pi;(h) = olh), |7—i>2. 


Pnm(h) = 1— mph+ o(h). 200 


则 相应 的 极限 分 布 {Pj,0 < 7 < m} 满足 (6.3.6) 方程 (0 < 7 < m)， 解 之 得 : 及 = 


6.3 ” 生 灭 过 程 


及 


去 (2) Pa, 再 由 半 P=1 知 
j=0 


考虑 几 个 特殊 的 生 灭 过 程 
(a) 有 迁 入 的 线性 增长 模型 ” 生 灭 过 程 生 = {X(t),t>0), 若 入 =n 和 ta, An = nh, 
和 >0A>0a>0 称 七 为 有 迁 入 线性 增长 模型 它 用 于 描述 生物 再 生 和 人 口 增 长 过 
程 .假定 群体 中 的 每 个 个 体 以 指数 率 和 出 生 ， 同 时 ， 群 体 由 于 从 外 界 迁 入 的 影响 又 以 系 
数 a 增加 ， 而 群体 中 每 个 个 体 以 指数 率 j 死亡 .这 时 (6.3.3) 方程 化 为 : 
Piolt)= ~aPo(t) + ypPiilt) 
Pi(t)= DF- D+aPsit) -IATAI + aPi(t) + HI + DPisrilt), 7>1 
(6.3.8) 
记 Mi(t) = E[X(t)|X(0) = = 到 jDPij(t), 则 由 (6.3.8) 两 边 乘 以 ) 再 对 7 求 和 ， 可 知 


(2M;(t),t > 0) 满足 下 列 微分 方程 


解 之 得 到 
和 | Ww 
re 一 1) +ieW-W)t， 如 和 冯 j. 
且 


oo) 六 之 
in Mi;(t) = 机 如 和 之 
一 CC py 如 入 < H. 


这 在 直观 上 的 意义 是 很 明显 的 . 

(b) 纯 生 过 程 (yule 过 程 ) 

Poisson 过 程 是 一 个 最 简单 的 纯 生 过 程 , , 它 是 当 lin 0,.% SA 的 生 灭 过 程 . Poisson 
过 程 的 一 个 自然 推广 是 在 给 定时 刻 一 事件 发 生 的 可 能 性 依赖 于 已 发 生 的 事件 数 , 即 对 于 充 
分 小 的 及 > 0, 车 Pii4i(h) = A 和 ih+o(h), Pi(h) = 1- 和 ht+o(h), 其 它 Pij(h) = o(h),j > itl, 
Pj(h) = 0,7 < i 这 便 是 纯 生 过 程 . 纯 生 启程 中 一 个 特殊 情形 是 : 当 和 。= ng 时 ， 称 为 
yule 过 程 . yule 过 程 在 物理 ， 生 物 中 常会 看 到 它 的 踪迹 . 假定 某 群体 的 每 一 位 个 体 在 
时 间 长 度 内 生出 新 的 概率 为 Bh + o(h), 且 个 体 之 间 产 生 下 一 代 的 个 体 数 也 相互 独立 ， 那 





N 


Piir1(h)=P(X(t+h)=i+1X(t)=2) 
=P(X(t+h)— X(t)= 1|X(t) 二 2) 
=C3(0j + op) 一 CPP 二 ol 一 
=nBh + olh) 


当 j7 了 >i+1l 时 ，Pij(h) = olh) ; 7 <i 时 Pi;(h) = 0, Pi(h) = (1 -Bh—o(h))" = 
1—nBh+toh). 以 NA =nB, nn = 0 人 代入 (6.3.5) 得 


P’'(t)=—nBP,(t)+ (no—1)BP, 1(t), n>1 (6.3.10) 


分 二 种 情况 讨论 : 
1"” 设 X0)=1 即 已 (0) ee Ut 由 n= 1, Pi(t) = 


Pn(t) = exp( 一 Bi)[1 — exp(—PBt)]"!, n>1. 


记 fi(p,t) = > Pn(t)p”, 那么 


pe 一 及 


2” 设 X(0) =, 即 P.(0)=1,P(0) = 0,n 关 上 的 情形 ， 由 于 每 个 个 体 生 下 一 代 相 
互 独 立 ， 因 此 我 们 可 以 设想 : 这 个 X(0 /= 过 程 可 以 看 作 是 由 X;(0) = 1 的 个 
yule 过 程 X;(t)(1 < i < 上 ) 的 和 构成 ， 即 X= 台 (+). 并 令 


fi(p,t) = 


Pin(t) = P(X(t) = n|X¥(0) = £) 


= 》 Pinlt)p 


n=k 
则 有 


fr(p,t) =[f1(p, OF 


pe 一 有 R 
加 1 全 性 | 


co 

=(pe™ ot) >》， Cm+r-1(1 — eM)™p™ 
m=0 202 

= 》， Cee )*(1 3 i 


壮志 


6.4 ， 强 马 氏 性 与 谍 入 马 氏 链 


与 有 (p,t) 的 定义 比较 ， 得 


Pen(t) = CTfe-hpt1T 一 ept)n-R n>k 
Prin(t)= 0 n<k 


这 说 明 ， 对 yule 过 程 ， 由 初始 分 布 及 9 矩阵 能 够 唯一 确定 P(t). 
$ 6.4” 强 马 氏 性 与 嵌入 马 氏 链 


在 马 氏 链 中 ， 它 的 基本 性 质 是 它 具 有 “ 马 氏 性 ?， 即 已 知 “ 现 在 >，“ 将 来 ”与 “过 
去 ”历史 无 关 . 这 里 所 指 的 “现在 ”时 刻 t 是 一 个 工 中 的 数 . 自然 地 要 问 : 如 果 “ 现 在 ” 
改 为 随机 “ 停 时 ”， 其 “ 马 氏 性 ”是 否 还 保持 ? 例如， 已 知 过 程 在 第 一 次 跳跃 时 刻 (现在 
时 刻 是 元 ) 的 状态 ， 那 么 过 程 在 第 一 次 跳跃 后 (将 来 ) 与 过 程 在 之 前 是 否 条 件 独 立 ? 这 
就 是 所 谓 “ 强 马 氏 性 ”问题 . 强 马 氏 性 概念 是 一 个 非常 有 用 的 概念 , 但 它 的 严格 定义 需要 
测度 论 的 知识 . 本 市 力图 用 直观 的 ， 初 等 概率 论 的 语言 对 “ 强 马 氏 性 ”与 有 关 的 重要 结 
作 简 要 的 介绍 ， 以 便 读 者 应 用 . 

记 Fi 二 o(X(w),0<w<<t) 是 由 {X(w),0 <w< 妇 生成 的 事件 的 o 域 ， 即 由 过 程 久 
在 [0,4] 内 可 能 提供 的 全 部 信息 ( 参见 第 四 章 § 4.3). 一 个 非 负 随机 变量 7, 着 对 于 vt > 0 
有 (7 <t)€ Ft, 即 事 件 {7 < 发 生 与 否 ， 完 全 由 过 程 X 在 t 时刻 之 前 (包括 t 时 刻 ) 的 
状态 {X(w),0 < w < 如 决定 ， 则 称 7 关于 X= {X(t),t > 0} 是 停 时 (或 马 氏 时 间 ). 显 
然 ， 任 意 常数 +> 0 是 停 时 . 若 盖 9 是 停 时 ， 则 7 二 09,7 人 9,7V9 亦 是 停 时 . 

定义 ” 设 马 氏 过 程 X = {X(t),t > 0}, 状态 空间 5 = {0,1,2,…j), 设 pn 关于 XX 是 
停 时 (n>>1),0<pi<ps<…<pn 及 t>0, 若 对 Vj,i; ES(0<k<n) 有 





P{X(pa +t) = jX(0) = i0, X(py) = in, (1 < hk < n)} 
=P{X(pn +t) = jE(pn) =}, 











则 称 { 生 (tt 二 中 关于 {pi,0 < 和 <n}(n > 1) 具有 强 马 氏 性 . 
以 下 我 们 总 假定 时 齐 马 氏 链 = { 基 (),t > 0} 轨道 右 连 续 ， 8 = (qi; ) 为 保守 @ 甜 
阵 ， 且 0 < gq; < %, i €E 5, 并 着 重 讨论 XX 关于 跳 藉 时 刻 的 强 马 氏 性 问题 令 m = 0， 





Tn = {i 

On 三 人 一 Tn-1(n > 1) 
Tn 表示 的 第 nn 次 跌 牙 时 刻 ，b 表示 第 为 次 与 第 n 一 1 议 跳 贱 的 时 间 间 隔 . 令 了 (7 = 
X(T + YE) = {Xm Ot > On > 1), 7 = 0, 7 = inf{t: t> TY,YIW() 
YO )}. 


定理 6.4.1 Vs,t>>0,;7 关 i 有 


P{71 < s, X(Ti1+v)=7,0<v HX0)=i,X(n)= 17} (6.4.1) 
= [1— exp(—gqis)]exp(—g;t) 


证 ”由 定理 6.1.4 的 推论 知 


P(r < ulX(0) =iX(n) = 


=1 — exp(—qiu). 


i 0 ot 
二 P{ni < s, X(Nnt+v)=70<v tA0)=in=u, Xu) = 
0 
dP{ni < ulX(0) = i, X(n)= 放 | 


3 P{X(ut+v)= 0 <v ts) =i,0 < ss <u,X(u) = 7}g;exp( qu) du 
0 


s De Ek 
3 P{X(u+v)=j,0<v<d 站 (x (二 =i,0<k<2" -1) ,XX(u) = 让 
0 2 


VE 


qi exp( 一 qiu) du (轨道 右 连 续 ) 


= BI 
0 


号 PIX(v)=j,0<v <tX(0) = jgiexp(—qiu) du (时 齐 性 ) 
0 
=PIX(v)=7,0<v <tX(0) = [1 ~ exp(~—qis)] 


=[1 一 exp( 一 qis)]exp( 一 gt) (由 (6.1.5) 式 )， 口 


推论 1 vs,t>0,7zi 
(1)P(01 < sg <tX(0)=i,X(n)=7)) = | -exp(—gs)][l ~ exp(—g;t)]. 
证 ”因为 


Plni < s,T -n>tX(0)=iX(n)=)) 
=P(n < s,X(n+v)=70<v x0) =i,X(n) = 
=(1 -es)e wt (定理 6.4.1) 


6.4 ， 强 马 氏 性 与 谍 入 马 氏 链 


所 以 


P(01 < sg < tIX(0) =i,X(n) =7) 

=P(ni < sr — ntX(0)=i,X(n)=7) 

=P(n < slX(0) =i Xn) =) -Pn smn -n>tX(0)=iX(n)=)) 
S(t 


(i 
(2) 给 定 了 (0), (mm), 91 与 9。 条件 独立 . 
证 ”因为 
Pl(01 A s,0» <tX(0) 三 7, X(T1) = 
=[1 一 exp( 一 qis)][1 一 exp( 一 qjt)] (上 一 结论 ) 
且 , 令 t 一 ~, 可 得 
P(01 < s|X(0)=i,X(n)= 7)=1- exp(—gs). 


令 s 一 <, 可 得 
a Tp dE ee 
所 以 
P(O1 < 3,02 < t|X(0) Se i, 革 (Tn1) 一 7) 


=P(01 < s|X(0) = X(n) =7): P(b < tIX(0) =iX(n) =7). 


独立 性 得 证 . 加 
(3)X = {X(t),t > 0} 关于 五 具有 强 马 氏 性 . 
证 ”因为 
P(X(T1+t) = EX(0) 三 2 天 (ri) = 7)) 
a P(X(ni+) = XO0) = 二 w=)giexp(-qiu) du (全 概率 公式 ) 
0 
| P(X(ut+t)= EX(s)=i0<s <u, Xu) = Ig exp(—qu) du 
0 
= ) P(X(t) = IX(0) = jgi exp(-Q@03 du ( 马 氏 性 ， 时 齐 性 ) 
0 


等 x(t). 


所 以 


P(X(ni+t) = kX(n) = 7) 
= >》 P(X(n+t) = (0) = Xn) = 四 PK(OD =iX(n) = 了 (全 概率 公式 ) 


= Dal ‘P(X(0)=iX(n)=7) 


=Pjx(t). 


故 
PIX(T1+t) = RX(0) = Xn)=7)) = P(X(n+t) = (nn) = 7). 


即 针 = {X(t),t > 0} 关于 元 有 强 马 氏 性 . 
定理 6.4.2 Y(D = {X(ni++4),t > 0} 是 时 齐 MC, 且 与 X= {X(t),t > 0} 有 相同 的 
P(t) = (Pij(t)) 和 Q 矩阵 Q = (gij), 同时 YWW 与 X 的 初始 分 布 无 关 . 
证 ”由 推论 1(3) 的 证 明 可 知 Vi,j,kE5,;7 关 i,t>>0, 有 














P{X(ni=t)= EX(0)=i,X(n)=7)}= P(t) 


且 在 给 定 XX(71) 下 ， XX(4 十 ) 与 XX(0) 条 件 独立 . 
下 面 证 : V0O<w<u<<uniinES,0<k<n,lzzio,t>0, 有 


P{7n1i <tX(0)=7, Xn)= io, X(T) = KN tun) = i} = (1— exp(—qt)) 
(6.4.2) 
即 在 给 定 X(0) 下， 与 了 (741), 对 (4 十 如 1),…, 革 (4 十 Un) 条件 独 立 ， 注意 到 由 于 
P{X(Ti1) = io, XN) = ,KN un) = (0) = £} 
SS P(X(u) = io, (UW 二 1) Vi eh ,三 (4 十 | Es in|X(0) = LT1 ss 2 
0 
qr exp(—qiu) du 
人 P{X(W) = ioX(0) = Ln =uP{F tu) = 并 (0) = Ln = Xu) = i0} 
0 
“1 P{X(UFun) = |X(0) = Xu) = ion = Xu) = 1, 
,Un 1) = iin 1}g exp(—qu) du 
=Poate) Bt) Pil) 人 P{X(u) = io|X(0)= ,7 = wgrexp(—qu) du 
0 
=Pisa (un) Pisis (ua) Pi sis (un) P{X(n) = HK (0) = 人 


=Pioi (ui) Pio U2) Pi i, (Un )qrio /ql 
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而 


P{ni <t, Xn)=io, Xntu) = ,Kn un) = i|X(0) = 他 
=-/ P(X(u) = io, Xutu) = ,Kut un) = in|X(0) = ,n= 
0 
qr exp(—qru) du 
=-/ P{X(u)=iolX(0) = Un =uP{X(utu) = X00) = Ln =u, Xu) = i 
“+ P{X(u+F un)=in|X(0) = Xu) = on =) = 1, 
,XU nl1) = in-1}g exp(—qru) du 
二 B 


tosil 


t 
(wi) Pi is (U2): td —P{X(u) = io|lX(0) = ,n= wv} 
0 
qr exp(—qru) du 
=bon(Cu Pw) 


tn—1in 


=P;,i, (U1) Pi, (zz ) es er (wn)(1 exp( 一 qtt))groyadr 


(un P{T < t, X(T1) 二 io|X(0) 二 /} 


故 
Pi{ni <tX(0)= 71, X(N) = io, XNn+u) = i ,KN + un) = in} 
_P{ni <t,X(n)=io,XNn+W) = XN) = |X(0) = 0 
~ P{X(n)= io, Xn) = ,un) = |X(0) = 
=1 — exp(—qt) 
从 而 (6.4.2) 式 得 证 . 


再 证 (= {X(T 十 相 ,t+ > 0} 为 时 齐 MC, 具有 P(t) = (Pi;(#)). 即 对 Y0 < wr < ws < 
lt>0,1#Fio,i Ed,0<k<n—1,171,7€ 8, 证 明 


P{YW(u+t) = X00) = YY(0) = io, YH) = io ,YW m1) = 1 
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YW(w) = 计 二 P;;(t). 


注意 到 由 (6.4.2) 式 ， 可 得 : 上 式 左边 


=P{X(n tat = jx0) = 1 XN) = i 二) 二 十) 二 让 


| P{X(v 二 w+ = jX(0) = 和 (0) 王宫 和 十 人 二 写本 二 
0 


71 = vw}g exp(—grv) dv 


P{X(v Hutt) = jx(s) = 00 <s vx) = i ,Xv + = 
0 


qrexp(—q1v) dv 


人 P{X(v+ut+t) = Xv 十 2) = igexp(—qv) dv 
0 


/| P{X(t) = j|X(0) = i}grexp(—q1v) dv 
0 


=P;;(t). 


知 Y(V 与 X 具 有 相同 的 转移 概率 甜 阵 P(t) = (Pij(t)) 和 Q@ 和 矩阵 8=(gij), 且 YW 与 X 
的 初始 分 布 无 关口 

推论 YW = {X(n +tit > 0} 是 时 齐 MC 上 且 与 X= {X(t),t > 0} 具有 相同 的 
P(t) = (Pij(t)) 与 8 和 窍 阵 Q= (gqij). 

证 ”用 数学 归纳 法 . nn = 1 时 ， 成 立 . 

设 时 成 立 ， 即 


Pl(YWO(u tt) = YY(0) = io, Ya) = i ai) = Yu) = 
=P;j(t). 


对 nn 十 1 时 : 


P(YR+HD(wy tt) = YD(0) = 加 ,YIHD (wy) = 
=P(X(Tr41+ utt) = XM) = io, (TH 二 2) = 
=P(YW (7 ut = Yr =i, ,YWmDN + ) = 
=P(X(TY t+) = TD) = 0 T+) = (n= 1 时 成 立 ) 
=P(Y (utt) = YY)(0) = io YO) = 1 Yu) = 
二 Pi;(t).，( 归 纳 假 设 ) 
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定理 6.4.3 马 氏 链 X = {X(t),t > 0} 关于 跳 晓 时 刻 {m,0< <n}(n > 1) 具有 强 


6.4 ， 强 马 氏 性 与 谍 入 马 氏 链 


马 氏 性 ,， 即 Vi>0,inES,in1Ai1<k<n-l,iizxi jed,N 
P{X(T, 十 过) 7|X(0) Se 20, 卫 (1) Ly ;X(Th_1) ~ in_1; X(T,) 计 
=P{X(7, 十 ) =j|X(m)= 
=P;j;(t) 
证 ”用 数学 归纳 法 . 当 n= 1 时， 由 定理 6.4.1 知 结论 成 立 . 
现 设 (6.4.3) 对 成立， 往 下 证 对 m+1 的 情形 . 由 定理 6.4.2 知 Yt? 在 X(71) 下 与 
X(0) 无 关 ， 于 是 
P{X(Tr41+t) = IX(0) = ,Xn)= io, XT) = 和 (TI 三 村 
=P{YD(rD 4) = YD(0) = io, Yr DN) = 6, ,YN rN) = 
=P{YW 中 (TD +==jYW(7)= 订 (由 归纳 假设 ) 
By(t) (定理 6.4.2) 
从 而 结论 对 任意 n > 1 均 成 立 . 
由 以 上 定理 ， 不 难 有 以 下 
推论 
(1)Vix EG 9, i 到 k+l 0 < Ek <n— 二 1 z in-1, ti 之 0 




















P{On+41 < t|X(0) = 20, (7T1) = 21,， 人 y(t) | in_1; (Th,) = 2} 
= 1— exp(—gt) 


(6.4.4) 
(2) 关于 外 (0), 基 (74),… ,四 (4), 91,02,… ,9n,9n+1 条 件 独立 . 
(3) 
Li 了 2 
P{X(Tm+41) = j|X(0) = io …: em | ee 
仅 证 (3). 
证 “左边 


bo 
二 0 ,00 ey 
dP(Gu41 < tIX(0) = i0,... , X(T) = 
人 ee ee 
dP(Ont1 < HX(Ta) = ee 
31 Dn i de 





多 
di 


车 令 苹 二 (7%), 则 {Xs,n > 0} 有 以 下 
定理 6.4.4 饼 = {。,n > 0} 是 离散 参数 MC, 其 一 步 转移 概率 户 ; 为 
E | ee 


0 全 一 到 











P= (6 + qqr!) 














证 ”由 定理 6.4.3 推论 即 得 . 

称 基 = {XX,n > 0} 为 嵌入 马 氏 链 . 

以 上 说 明 : 对 于 连续 参数 马 氏 链 匀 = {X(t),t > 0}, 如 果 我 们 只 考虑 跳 暑 时 刻 {5,n > 
0] 的 状态 蕊 ,= 和 mn) 则 对 = {Xn,n > 0} 仍 是 MC, 其 转移 矩阵 为 P = (65 + qijq7 1). 


$ 6.5 ”连续 参数 马 氏 链 的 随机 模拟 


从 上 节 讨 论 知 道 , 对 于 连续 参数 马 氏 链 碟 = {X(),t > 0}, 当 给 定 X(mm) 三 加 (全 过 四 
时 ， 停 留 在 入 状态 的 时 间 {60,,n > 1} 条 件 独 立 ， 且 9,, 服从 参数 为 w。 的 指数 分 布 ， 而 
状态 转移 概率 P{X(Tm+1 = in+1|X (Tn) 二 in} = din,int1 /i ， 故 X 的 轨道 可 形象 表示 如 图 


6.5.1. 





图 6.5.1 
因此 对 于 初始 分 布 为 {P(0),; € 5}, 8 冠 阵 Q = (qij) 为 保守 的 马 氏 链 X= {X(t),t > 
0} 轨道 的 模拟 可 分 为 以 下 三 部 分 : 
1” 初 始 分 布 P.(0) 的 模拟 ; 
2 ”停留 时 间 {09;,n > 1} 的 模拟 ; 210 
3。 状态 转移 Pj = P(X(m+1) = j|X(m) = 站 = 6ij 十 qiygqi7! 的 模拟 . 


具体 模拟 步骤 如 下 : 


6.5 ”连续 参数 MC 的 随机 模拟 





1” 取 两 串 相 互 独 立 的 同 为 (0,1) 上 的 均匀 分 布 随 机 变量 序列 {Ui,n > 0} 及 {Vi,n > 


条 可 
2。 若 i 满足 | | 
WP(0) < To < PO) 
类 过 上 天 二 0 


则 取 和 (0) = io 作为 初始 状态 
3 ”取出 太 , 令 pb = a 作为 (t) 停留 在 X(0) = io 的 时 间 ， 
4"” 取 出 态 , 若 如 E9 使 矶 满足 


dt diok < 仿 < BE Qo 


k=0 dio 和 





则 取 XX(71) = X(01) =2 

5。 取 出 芒 , 令 反 二 -qin 作为 (1) 停留 在 (ni) = 状态 的 停留 时 间 ， 再 取 
T2 二 01 十 92, 作为 第 二 次 跳 贱 时 刻 ，; 

6” 取 出 记 , 若 ioeE5 使 访 满足 


Qik Qiik 
oe < 访 < 六 a 


则 取 X(m)= io; 


继续 以 上 步 又 
7 取出 Un, 令 0,, > 一 人 mp 作为 X(t) 停留 在 XTi-1) = 2 状态 的 停留 时 


间 ， 再 取 Tn 二 SD OF; 
= 
8” 取 出 WW, 若 in&E5 使 VW 满足 


DE < 


ko in-1 大 二 din -1 





则 取 XT) = 
如 此 继续 重复 如 上 步 又 ， 就 可 模拟 XX 的 一 条 轨道 ， 它 满足 已 给 的 条 件 : 首先 

















P(X(0) = io) = 2 Pi(0)< < > no- P; (0). 


P{On+1 < t|X(7T) 一 2 二 P{—gqr InUnt < t} Ss exp(—gi,t). 
最 后 211 


有 7 和 = in+1|X (Tn) 二 2 =P 





int+1—1 ginak in+1 Ci 
Ns ey 
gi 


天 二 0 人 


= qiinti /gis: 


$ 6.6 可 道 马 氏 链 


对 于 一 个 随机 过 程 ， 有 时 沿 时 间 逆 向 来 考察 它 的 概率 特性 也 是 很 有 意义 的 ， 下 面 先 
给 出 一 随机 过 程 可 逆 性 的 定义 . 

定义 ”随机 过 程 {X(t),t > 0}, 对 于 任意 0 入 下 < 妇 < < 二: 记 故 三 下 十 真一 丰 ， 
如 果 天 (#1), 瑟 (t)，, 瑟 ( 加 ) 与 和 ( 太 ), 天 (的 ) 三 ( 克 ) 具有 相同 的 联合 概率 分 布 ， 即 
正 向 过 程 与 逆向 过 程 具 有 相同 的 概率 特性 ， 则 称 该 过 程 {X(t),t > 0} 是 时 间 可 逆 的 . 




















一 逆向 
人 
0 全 ta-1 ta 
正 向 
图 6.6.1 ， 


可 以 借助 于 图 6.6.1 更 好 地 理解 时 间 可 道 的 概念 . 正 向 时 间 序 列 的 起 点 妈 与 终点 机， 
正好 是 道 向 时 间 的 终点 # 与 起 点 女 , 且 沿 正 向 看 的 相 邻 时 间 间 隔 与 沿 道 向 看 的 时 间 间 隔 
依次 相同 . 

本 节 只 讨论 可 道 马 氏 链 的 有 关 问 题 ， 对 于 马 氏 链 ， 如 何 判 断 它 是 时 间 可 道 的 呢 ? 以 
下 定理 给 出 回答 . 

定理 6.6.1 设 马 氏 链 X= {X(t),t > 0}, P(t) = (Pi 的 ) 具有 平稳 分 布 {Pj,j € 9)， 
初始 分 布 为 {Pj(0),7 € 5S}, 了 X 为 时 间 可 道 马 氏 链 的 充分 必要 条 件 是 它 是 平稳 过 程 ( 即 
P;=P(0),jE€ES), 且 Vi>0,i;ES 有 


PiP;;(t) = Pi Piilt). (6.6.1) 
证 ”必要 性 设 X 是 可 道 MC, 取 n=2,0< 妇 <tb= 寻 十 t, 由 可 道 定义 有 
P{X(t1) = 站 天 (时 十 有 二 全 P{X( 十 有 二 让 和 (全 ) 二 从 (a) 
上 式 两 边 对 7 求 和 ， 得 P(X(1) = 让 = P(X(ti 十 ) = 人, 知 六 为 平稳 过 程 ， 记 PP = 
P(X(t)) = 沪 . 由 (a) 式 可 得 (6.6.1) 式 . 5 


充分 性 ” 设 (6.6.1) 式 成 立 ，Y0 < 在 < 妇 < < 记 夺 = 机 二 ty 一 妇 ,1<k<n, 
Virk ES,1<k<n. 


6.6 ”可 逆 马 氏 链 


P{X(ti) = i1, X(t2) = 12 ,X(tn) Es in} 
二 


= 


YS 


(tn 一 了 人 
=Pi, Pisin i (tn — tn-1)°"* Pisislt3 — t2)Pisi (t2 —t1) 
=P{X(t, 十 刀 一 如 ) 三 2 及 (tn 十 三 一 如 十 如 一 如 -三 2 一 1 ;X(tn 十 刀 一 刀 ) 三 1} 
=P{XX( 的 ) 一 得 屏 ( 的 ) 二 和 ,下 (的 ) 二 入 
因此 ， XX 为 可 道 MC.， 口 
推论 1 对 于 马 氏 链 X = {X(),t > 0}, 若 存 在 分 布 7 = (mi,7 e 5) 满足 (6.6.1), 则 
7 是 平稳 分 布 ， 关 以 7 为 初始 分 布 ， 则 XX 是 平稳 过 程 . 
证 ”对 (6.6.1) 式 两 边 对 ; 求 和 ， 得 


Ti 二 DriPij(t) 一 driPilt). 
了 了 


故 r = {zj,7 E 5S} 为 平稳 分 布 , 如 7 = P;(0), 则 Pj(0)= P{X 轨 = 让 = 2 TiPij(t) = 7, 
即 X 为 平稳 过 程 . 

推论 2 离散 参数 马 氏 链 铸 = {Xn,n>0},P=(P),mi= P(Xo=i),iE5S, 则 XX 
可 逆 的 充分 必要 条 件 为 














Wy WD (6.6.2) 
证 ”必要 性 显然 ， 仅 需 证 (6.6.2) 式 是 可 道 的 充分 条 件 ， 用 归纳 法 证 对 n> 1 均 有 
TiP = (b) 
nn 二 1 时 ，(b) 式 即 为 (6.6.2) 式 ， 现 设 (b) 对 n 成立， 那么 对 nn 十 1 有 
Ti Put Ti > PHPl?) 
天 
= Pims Py) 
天 
= > Peiry PN 
天 
一 T7 》， Pl Pu 
天 


4 (n+1) 
= Pj 
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从 而 (b) 式 对 所 有 n > 1 成立. 再 由 推论 1, 知 7 是 平稳 分 布 且 XX 是 平稳 过 程 . 再 由 定 
理 6.6.1 的 充分 性 ， 得 久 可 遂 . 口 
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对 于 连续 参数 马 氏 链 X = {T 人 > 路, 着 给 定 的 是 密度 矩阵 Q 符 阵 ， 自 然 希望 将 
可 北 性 的 条 件 用 Q 甜 阵 来 描述 . 

定理 6.6.2 设 平稳 马 氏 链 X 的 Q 抢 阵 为 9 = (gi;), 车 满足 向 前 向 后 微分 方程 的 解 
唯一 ， 则 XX 可 逆 的 充 要 条 件 是 平稳 分 布 x = {xi,iE 3} 满足 


Miij = Tdji YITES (6.6.3) 
证 ”必要 性 显然 ， 下 证 充分 性 ， 由 8 满足 


PI;(t) 二 >》 gir Prj(t) 二 > Pr (t)qry, 
k 天 


今 
人 和 
Ti 
则 
万 / Tj py 
= 之 FA 的 
天 人 
= TP) Eon 
Bk 
= 》 qin Pej(t) 
k 
可 知 (Bj(t) t) 满足 向 后 方程 . 由 解 唯一 性 条 件 Pij(t) = Bi;(t), 得 
TiPi;(t) 二 TyPii(t) Vi,7 € ,tt > 0 
由 定理 6.6.1 知 XX 可 道 . 


推论 1 若 碟 为 有 限 状 态 不 可 约 平稳 链 ， 则 可 逆 的 充 要 条 件 是 (6.6.3) 式 成 立 . 

对 于 生 灭 过 程 ， 有 如 下 重要 定理 

定理 6.6.3 ”对 于 给 定 生 灭 Q 矩阵 (6.3.2), 车 和 > 0(k>0),px>0,k>1,n=0, 
则 存在 可 道生 灭 Q 过 程 的 充 要 条 件 是 


AoA1 Ap 1 
a < cc (6.6.4) 
证 (从 略 ， 有 兴趣 的 读者 可 看 钱 敏 平 ， 修 振 挺 等 车， 可 逆 马 尔 可 夫 过 程 ， 1979 年 
湖南 科学 技术 出 版 社 ). 
可 逆 马 氏 链 在 物理 ， 生 物 ， 排队 网 络 中 有 广泛 的 应 用 ， 以 下 仅 举 二 个 在 排队 论 中 的 
例子 . 





6.6 ”可 首 马 氏 链 


例 1 M/M/s 排队 系统 

定理 6.6.4 在 M/M/s 排队 系统 中 ， 设 顾客 到 达 率 为 > 0, 每 个 服务 员 的 服务 率 为 
/> 0, 若 和 < s/, 则 顾客 离开 系统 的 输出 过 程 在 稳 态 下 是 参数 为 的 Poisson 流 . 

证 ” 设 和 (表示 + 上 时 刻 系统 的 顾客 数 ， 显 见 X= {X(t),t > 0} 是 生 灭 过 程 ， 且 由 
站 <1 知 满足 (6.6.4) 式 . 故 X 在 稳 态 下 是 时 间 可 逆 的 . 现 沿 时 间 正 向 看 ,，X = {X(t),t > 
0} 过 程 增加 1 的 时 间 点 构成 一 参数 为 和 的 Poisson 过 程 ， 这 正 是 顾客 相继 到 达 时 刻 . 由 
过 程 可 道 性 ， 当 我 们 沿 时 间 逆 向 看 ， X(t) 增加 1 的 时 间 点 亦 构 成 参数 为 和 的 Poisson 过 
程 . 但 这 时 间 点 恰 是 顾客 相继 离开 的 时 刻 ， 从 而 顾客 离开 时 间 点 构成 速率 为 和 的 Poisson 
过 程 (如 图 6.6.2 示 ). 























“图 6. 6.2 ”人 @ 是 沿 逆 向 时 间 XCt) 增 加 1 的 时 间 点 
它们 恰 是 正 向 时 间 X(t) 减 少 的 时 间 点 


例 2 串联 排队 系统 

考虑 一 个 具有 二 个 服务 台 的 排队 串联 系统 ， 设 顾客 以 具有 参数 和 的 Poisson 流 到 达 
服务 员 1 前 ， 经 服务 员 1 服务 后 ， 它 们 加 入 到 服务 员 2 前 的 队列 . 假设 两 个 服务 员 前 有 
无 限 的 等 竺 空间， 第 i 个 服务 员 对 每 个 顾客 的 服务 时 间 是 参数 为 Ai 的 指数 分 布 (i=1,2)， 
此 系统 称 为 串联 排队 系统 ， 如 图 6.6.3 所 示 





人 < 1 则 由 定理 6.6.4 知 服务 员 1 的 输出 ( 即 服务 员 2 前 的 到 达 ) 过 程 是 参数 为 ^ 
的 Poisson 流 ， 故 对 第 2 个 服务 员 而 言 ， 也 是 M/MV1 排队 系统 ， 如 车 应 用 过 程 可 道 性 ， 
可 得 到 进一步 的 结果 先 看 
定理 6.6.5 “在 稳 态 遍历 的 M/M/1 排队 系统 中 ， 则 
1” 系 统 中 现 有 顾客 数 与 过 去 离开 过 程 独立 ，; 
2 ”顾客 在 系统 的 停留 时 间 (包括 排险 竹 待 加 上 服务 时 间 ) 与 它 离 开 前 的 离 去 过 程 独 
YY. 


证 ”1” 因 到 达 是 Poisson 流 ， 故 以 后 到 达 的 过 程 与 现 有 系统 的 人 数 相互 独立 . 由 
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过 程 时 间 可 道 性 ,逆向 时 间 的 “未 来 到 达 过 程 ” 与 系统 的 现 有 人 数 相 互 独 立 . 即 正 向 时 间 
看 的 “过 去 离开 过 程 ” 与 现 有 人 数 独 立 ， 

2” 设 一 顾客 中 时 刻 到 ， 了 时 刻 离 去 ， 由 于 顾客 到 达 是 Poisson 流 ， 故 顾客 在 系统 
的 逗留 时 间 ZL -有 与 元 后 到 达 的 过 程 独立 ， 但 逆向 时 间 看 ， 等 于 一 顾客 Ts 时 间 到 ， 
元 时 间 离 开 ， 由 过 程 时 间 可 逆 性 ， 瑟 一 荆 应 独立 于 TT “后 ” ( 道 向 者 )“ 到 达 过 程 ”， 而 
这 恰 是 正 向 时 间 元 前 的 离开 过 程 ， 口 

定理 6.6.6 若 六 <1(i= 12), 则 串联 排队 系统 在 稳 态 下 : 

1 ”在 服务 员 1 前 的 顾客 数 与 服务 员 2 前 的 顾客 数 相 互 独 立 ， 且 

和 入 2 入 
P( 在 1 前 有 史 个 ,在 2 前 有 见 个 ) = ( ) @ 二 (2) @ 入 ) (6.6.5) 


AH 











2 ”一 顾客 在 服务 员 1 前 的 逗留 时 间 与 在 服务 员 2 前 的 逗留 时 间 独 立 ， 

证 1” 由 前 一 定理 知 ， 服 务 员 1 前 的 顾客 数 独立 于 对 1 以 往 的 离 去 过 程 ， 这 正 是 
对 2 的 到 达 过 程 ， 从 而 两 服务 员 前 的 顾客 数 独立 ， 于 是 (6.6.5) 式 得 证 . 

2” 由 前 一 定理 , 一 个 顾客 在 服务 员 1 前 的 逗留 时 间 独 立 于 它 离 开 1 前 的 离开 过 程 ， 
而 这 恰 是 该 顾客 到 达 2 前 的 到 达 过 程 (对 2 而 言 ). 从 而 每 个 顾客 在 2 前 的 等 待 时 间 与 服 
务 员 2 对 这 些 顾 客 的 服务 时 间 均 独立 于 在 服务 员 1 的 逗留 时 间 . 故 2 ”得 证 ， 口 





$ 6.7 马 氏 更 新 过 程 与 半 马 氏 过 程 


马 氏 更 新 过 程 是 马 氏 过 程 与 更 新 过 程 的 综合 和 推广 ， 它 有 很 强 的 背景 : 设想 一 系统 
(或 一 质点 ) 其 状态 的 转移 是 随机 的 , 它 从 状态 i 出 发 转移 到 ( 另 一 ) 状态 ; 的 概率 是 Q( 7)， 
相继 到 达 (访问 ) 的 状态 组 成 一 马 氏 链 ， 同时 ， 它 在 每 一 状态 的 逗留 时 间 是 随机 的 ， 其 分 
布依 赖 于 当前 所 处 的 状态 及 下 一 个 将 要 到 达 的 状态 ， 确 切 定 义 如 下 

定义 ” 设 针 = {Xn,n > 0}), 对 固定 的 n> 0,X 是 取 值 于 状态 空间 3 = {0,1,2,.…} 
的 随机 变量 .了 = {Th,n > 0}, Th 是 取 值 非 负 的 随机 变量 , 且 0= 吉 <T .<TD< 
… < -1 < Th < 称 过 程 {X,T} = {(Xn, 了 Tah),n > 0} 为 马 氏 更 新 过 程 , 如 若 对 
vn > 0,7€5,t> 0 满足 








P{Xnt1 = 7 Tari — Th < HXo,To, Xi1, Ti ,Xn, Th} 


(6.7.1) 
3 P{Xn+1 = 7, Tr1 — Th < tlX,} 


(6.7.1) 式 表明 ， 已 知 现在 状态 六 将 来 状态 Xn+1 与 停留 在 Xn 的 时 间 T+41 了 的 联 
合 分 布 与 过 去 的 历史 Xo, 了 To0,… ,Xn-1, 了 -1 独立 . 称 (6.7.1) 式 为 半 马 尔 可 夫 性 . 本 节 讨 
论 总 假定 (T, 匀 ) 是 时 齐 的 ， 即 对 任意 i,; < 5,t 06 


P(Xn41 一 js Tn+41 二 了 < t| Xn 一 了 Q(i, 3,t) 


6.7 ” 马 氏 更 新 过 程 与 半 马 氏 过 程 


与 7% 无关， 称 矩 阵 族 {Q(t) = (Q(i,j,)),t > 0} 为 半 马 氏 核 . 显然 9(i,j,) 关于 t 是 单调 
不 减 函 数 且 右 连续 ， 故 


QDS lm O(N) = Qe) 


存在 ， 且 Q(i,7) > 0， 关 et7)=1ic9 即 Q=(4G7)) 是 一 随机 和 矩阵. 

以 下 几 个 命题 反映 马 氏 更 新 过 程 的 基本 特性 . 

设 {X,T} = {(Xn, Th),n > 0} 为 马 氏 更 新 过 程 ，{Q(t) = (Q(i,j,t),t > 0} 为 其 半 马 
氏 核 . 

命题 6.7.1 蕊 ={Zm >0} 是 SS 上 转移 冠 阵 为 8 = (9(i,j)) 的 马 氏 链 . 

证 ”由 定义 ， 对 Vi,j € 9, 易 知 





P{Xn+1 7|Xo, KX1, ,了 ep i} = P{Xn+1 es j|Xn = i} = Q(1,7) 


令 GG7 昌 =Q@G7 9/ 显然 











P{Zn+1 一 了 < t|Xn EE 2 Xt1 二 7} = G(i,7,t). 





表明 在 X = i 的 停留 时 间 分 布 不 仅 与 现在 时 刻 i 而 且 与 下 一 步 转移 到 的 状态 X41 = 7 
有 关 . 可 见 连 续 参 数 马 氏 链 是 它 的 特殊 情形 . 
命题 6.7.2 Vn > 1,t1,t2,… ,ty > 0, 则 


PTIi—-T Lt DDSto ,To TD < tn |Xo, Ki, ,Xn) 


> G(Xo, X1,t1)G(X1, Xo,t2) by 0. Sh WD (6.7.2) 


即 给 定 {Xn > 0} 时 ， 运 留 时 间 序 列 {6,, = 到 一 TT,_1,n > 1} 条 件 独立 ， 特 别 是 ， 着 5 
只 有 一 个 状态 时 ， 则 {90%,n > 1} 独立 同 分 布 . 

证 ”用 数学 归纳 法 . 口 

推论 着 5 只 由 一 个 状态 组 成 则 了 = {ZT,n > 1} 是 一 更 新 过 程 . 

可 见 ， 马 氏 更 新 过 程 是 更 新 过 程 的 推广 . 

有 时 ， 人 们 关心 的 是 到 达 某 状态 的 性 态 ， 设 j < 5 固定 ， 令 





Si =min{n :n> 0,X,= | 


Sij =min{n:n>5 ,Xr =i n>1. 


5i 是 第 n 次 访问 ;j 的 时 刻 ， 5; -Si ， 是 第 n 次 与 第 n 一 1 次 访问 ;的 时 间 间 隔 . 
命题 6.7.3 令 j € 5 固定 ， 则 57 {分 ,n > 0} 是 延 时 更 新 过 程 ， 即 $5, $4 - 53%， 
… ,9741 一 归 ,… 相互 独立 ， 且 {3; 一 5_1,n > 1} 同 分 布 . 
其 证 明 由 命题 6.7.2 的 推论 及 下 面 命题 6.7.4 即 得 . 
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一 新 的 状态 ， 记 为 x. 设 对 状态 子 集 互 C 5, 记 


n=min{n:n> 0,X,.€H} 


m=min{n:n>m-1, Xn EH} n>1 


X= Kr,, T= T,X,T) = {(X,,T,),n > 0 


命题 6.7.4 ( 镁 , 休 ) = {( 充 ,, 汪 ,),n > 0} 是 状态 空间 为 了 HU {+%} 的 马 氏 更 新 过 程 . 
(证 明 从 略 )， 
给 定 马 氏 更 新 过 程 (X,T) = {(Xn, 了 TD),n>>0}. Vit>0, 令 


Xn i <1 < Th+1 
Y(t) = 
co t+t> supT, 
nN 


称 Y = {Y(t),t > 0} 为 由 马 氏 更 新 过 程 (X, 了 T 了 ) 产生 的 (最 小 ) 半 马 氏 过 程 . 

显然 ，Y 是 连续 参数 随机 过 程 , 是 否 是 马 氏 过 程 呢 ?一般 情况 下 回答 是 否定 的 . 但 是 
在 其 更 新 点 {Ti,n > 0} 上 {Y(T) = Xn,n > 0} 是 一 马 氏 链 ， 故我 们 称 Y = {Y(t),t > 0} 
为 半 马 氏 过 程 . 

例 M/G/1 排队 系统 ， 即 顾客 到 达 流 是 参数 为 的 Poisson 流 ， 服 务 员 对 每 位 顾客 
的 服务 时 间 独 立 同 分 布 ， 分 布 函数 为 G(z), 且 与 到 达 流 独立 . 令 了 = 0, 你 表 第 个 
顾客 离开 时 刻 (n > 1), X,, 为 第 ”个 顾客 离开 时 刻 T+ 系统 中 的 顾客 数 . 先 证 (X, 了 T) = 
{(Xi, Tn),n > 0} 是 状态 空间 5S = {0,1,2,.…} 的 马 氏 更 新 过 程 . 

证 








P(Xnt1 = Tat1 — Ty < t|Xo, To , Xn, TT,) 
= Peon = j|Xo, To , Kn, TDi, Tt — Th = u) 

dP(TH 一 了 T < dXo0; 了 TD, ,XT)( 对 Tt1 一 0, 使 用 全 概率 公式 ) 
=/ PO = jw 有 dc 


(Xn+1 只 与 XX, 时 数目 和 间隔 有关， 服务 时 间 相 互 独立 ， 
且 与 到 达 过 程 独立 . ) 


交 
=/ P(Xn+41 = J Ti+1 a 了 < t|Xn, Tari 2 名, 二 u) dP(Tir1 人 7 < ulX) 
0 


























=P(Xn+1 = 7,Tn+1 — Tn < t|X») 


6.7 ” 马 氏 更 新 过 程 与 半 马 民 过 程 


(XX, 了) 的 半 马 氏 核 9(t) = (9807 为 ) 如 下 : 
Polt) P(t) P;( ) 
golt) qi(t) gz(t ) 
Q(t) = 0 golt) qi(t) gq2(t) 
0 0 golt) qi1(t) 








这 里 





t 
ed Me g(t — 2) dz,n = 0,1,2,... . 
0 


推导 如 下 : 记 On ee 了 一 人 1) 出 Q(1,3,1) P(Xn, 一 j, 0n < t|Xn_1 一 2), 当 1 > 1 了 > 2 
时 ， 利 用 全 概率 公式 
亿 [ 吉 到 南瓜 ) P{Xn, =j,0n <HXn_ i =i = 2}dG(z) 
0 
t 
a P{ 在 [0,z] 上 恰好 到 达 ; - i+ 1 个 顾客 |X，_1 = i0, = z} dG(z) 
0 
+ Mg)i-it! 
过 a dG(2) = gj-it1(t) 
当 ;=1 时 ，Q@(7 蚊 = 9 区. 显然 ， 当 i>1,7<i-1l1 时 ，Q(i,j,t)=0. 
Q(ij 4) = gj(t) 的 直观 意义 : 不 妨 设 T+ ， 时 X,_1 = i = 1. 这 表示 T+ ， 时 刻 第 
n 一 1 个 顾客 离开 之 前 第 个 顾客 已 经 到 达 ， 因 而 在 TH， 时 立即 被 服务 ， 而 第 n+1 个 
顾客 在 T+; 之 后 才 到 达 . 于 是 qj(t) = Q(i,j,t) 表示 在 Ti 1 时， 第 ”顾客 开始 被 服务 的 
条 件 下 ， 该 顾客 在 t 时 刻 之 前 (包括 t 时 刻 ) 被 服务 完毕 离 去 且 离 去 时 刻 T+ 时 系统 的 顾 
客 数 恰 为 了 个 ( 即 X, = 7) 的 概率 . 
若 X 1 =; = 0, 表示 系统 在 Tt+ , 开始 空间 ， 且 第 ”个 顾客 是 在 Tt, 之 后 的 某 时 
刻 到 达 ， 记 5,, 为 第 ”个 顾客 到 达 时 刻 与 时 刻 到 -1 的 时 间 间 隔 ， 则 
Q(0, 7,) 三 及 (5 沁 0 入 直 和 1 i 计 
= P{X, =j,0, 区 让 Xi =0,5, = ze dz 
0 
二 人 Q(1, jt— zr)Ne 7 dz 
0 
t 
=/ qj(t— zx)Ae dz 
0 
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$ 6.8 连续 时 间 马 氏 链 与 离散 时 间 马 氏 链 首 达 目标 模型 的 关系 


在 连续 时 间 马 氏 链 的 理论 与 应 用 中 ， 我 们 往往 对 其 过 程 的 不 同性 质 指标 感 兴趣 . 已 
有 的 研究 表明 ， 求 解 这 些 性 能 指标 ， 大 都 可 以 化 为 求解 某 些 意义 等 价 的 离散 时 间 首 达 目 
标 可 加 泛 函 的 一 阶 矩 问题 ， 这 为 连续 参数 马 氏 链 的 离散 化 提供 了 新 的 途径 . 

设 连 续 参 数 马 氏 链 XX = {X(t),t > 0}, 状态 空间 5 = {1,2,…,m,0} = SU 5o， 
5 = {1,2,.… ,m], S50 = {0}, 转移 率 和 矩阵 Q = (gij), 57 E 5 为 保守 Q 矩阵 :3 一 下 +， 
7 为 性 能 函数 (或 费用 函数 ), 7(i) = 7; 表示 过 程 在 i 状态 的 性 能 (或 费用 ), 不 失 一 般 性 ， 
设 ie5 时 ，7; >0,ieESo 时 ，7; = 二 0. 令 大 =inf{t:t>0,X(t) 关 了 X(0)} 为 第 一 次 跳 昧 
时 间 . T= inf{ft :t+> 0,X(t) € 50}, 规定 : inf$ = 十 oc. 关头 (0)€ S50, T= 0. 7 表示 过 
程 从 S 到 56o 的 首 达 时 间 . 





试 举 几 种 问题 加 以 讨论 . 

1. 首 达 时 间 与 首 达 目标 积分 型 泛 函 

令 丽 = etr(X(t))dt( 其 中 ，a > 0 为 折扣 率 因子 ), px(i) = B(W*|X(0) = 让 ， 
k>0,ies, M = mhagri. 显然 ， 当 ie€ S50 时 ， jx(ij =0; 0 ee Lx (2) = 


(f/f er(i) dt)* = Ca 下 面 仅 讨论 ie 5 的 情形 , 记 Wi, = 六 eo)r( X(t)) dt, 
易 知 ， 革 (0)& 3 时 ， 


( (6.8.1) 
Qlr(X(0))(1— er)+e iW X(n)es. 


| or(X(O0) (1 — eo) Ee: 
记 BP; ES P(X(n) = jIX(0) = 四 = 6 + qij/qi, P= (Pj)i) ES. Pr(i) = gi(ka + qi), 
Br oP = (Bi(iP),ij € S. Ri(i) = (ke 十 ora Ry = (Rr(i),i € 5)7, 
Wk 二 (jx(),iE 5)7. 易 知 ，0<PBi(i)j<1, 0 < Djes Br(i)Pi; < Bi(i)j <1. 我 们 有 
定理 6.8.1 


t(D) = Rd) +P(d) > Pym(j)ies (6.8.2) 
jES 
即 
Wi1= Rit+BioP:n (6.8.3) 
220 


11 = 》 (Bio PY RI (6.8.4) 


n=0 


6.8 ”连续 时 间 马 氏 链 与 离散 时 间 马 氏 链 首 达 目标 模型 的 关系 


证 对 Vies 
Hi(D) =E(a Ir(X(O) 1 — eon)X(0) = )+ 2 Pe We Det) = X(Tn1) = 
jE 
=a ria(a+g) t+ ,PE(e "xX(0) =i x(n)= 7 EW,|X(0) = 
了 ES 
X(m) = 站 (由 强 马 氏 性 ，e “与 环 - 关于 和 (0) = i,X(1) = 和 条 件 独 立 ) 


=—Ri 0 +2,P jE(e- |X(0) = BW, IX(n)= 7) 


(由 于 1 与 X(7i) 关 于 X(0) = I 条 件 独立 及 强 马 氏 性 ) 

=Ri(i) + Ble °°™|X(0) =i) Pipli) 

JES 
(因为 B(Wr|X(n)=7) = E(WIX(0) = 让) 
=R1(i) + qi(a + i) >》 Pa 
jE€S 

得 AH1(2) = Ri(i)+P1(i) DjesP HY ), 写成 向 量 形式 ， 即 有 ( 6.8.3) 式 . 注意 到 ， Bi1oP 
的 谱 半 径 0 < p(B 9 P) < pes [ai/ (a 卡 qi)] <1, 故 由 (6.8.3) 式 逐 次 迭代 ， 有 





M1 = RitBioP(RitBioP:.p)= Rit(BioP)Rit (Bo P) n= 


三 》 (5 © P) RI + (Pio P)" tp 


#0 
因为 nn 一 十 x, (B10oP)*tiji 一 0, 即 得 (6.8.4) 式 . 口 
为 了 讨论 > 2 的 情形 ， 先 给 出 两 个 引 理 . 
引 理 6.8.1 Vk>1,ie5, 当 gq;>0 时 有 


kl 
必 人 = cr D)™ gi(ma + gi)- {a i 


m=0 lat m=0 


Cr-D™a((m+Datg)!.() mo + gi(kat gi)! > Pi.86) 


各 怎 
证 ”注意 到 当 X(0) =ie3S,Xr)=7Jeso 时 ， 有 
W* = [oiri(1 一 em) 十 e-omW,,]” (二 项 式 展开 ) 
St > CP ("e-em 


= 
22.1 
7 下 je I 7 )™ Eomr 一 Girl 1 ecRT1 天 
本 > ,le 3 Cr eol yw WE 


和 二 站 


于 是 ， 类 似 于 定理 6.8.1 对 有 = 1 的 证 明 ， 有 
/人 =B(W|X(0) = 


k 
=(a- ri)*. >， Cr (1)"g(moe + gi)-! 


?720 一 0 
天 一 工 Ek—! 
十 》， {ee 人 一 ! >》、 Cm (1)™ Ble-o(m+tDr |X(0) = 让 : 
i=1 m=0 


DP E(WLIX(O) 三 和 (7T4) 二 十 li(KEa 十 qi)-! >》 ji 


JES JES 
即 得 (6.8.5) 式 . 加 
引 理 6.8.2 vk>1, 
天 k 
Dj CRP (meatg) := Ma [I ne + ei)! (6.8.6) 
Lei 2 二 0 
证 ”用 归纳 法 可 证 . 口 
定理 6.8.2 Vk > 1, ww > 0， 
H(i) = (Kat gi) Eripr i(d) + qi(ka + gq)-! > Pij Kx (I) (6.8.7) 
JES 
即 pr(0) = Rr(i) + Pr(i) > Pijpr()) (6.8.8) 
jE€S 
且 jp = > (Br oP) Rr (6.8.9) 
n=0 


证 ”利用 归纳 法 及 引 理 6.8.1, 引 理 6.8.2. 
当天 二 1 时， 公式 (6.8.7) 即 为 (6.8.2)， 现 设 (6.8.7) 式 对 1 < 上 <n 均 成 立 ， 即 对 
1<1<n, 有 





Qi > Pan)) = (la + gi)pa(i) — Iripa-1(?) (6.8.10) 
JES 
以 (6.8.10) 及 (6.8.6) 式 代 入 (6.8.5) 式 ， 对 有 = n +1 的 情形 (并 注意 到 CCl = 
Ca+1-D po(i) = 1), 有 


ntl n+1—! 
tnt) =r n+ DI netea) + » Crimpt (nt+1—)! 
m=0 
n+1—i 
I[[ (m+ Date) et a) rip i) + g(r+ Datg)! 
7 二 0 
> Piypnt1()) 
JE 222 


=[(n+ lat+g] int ripa(i) + gil(n + 1)a+ qil 1 Pypntli )) 
jES 





6.9 首 达 时 间 与 首 达 目标 积分 型 泛 函 的 特性 及 其 反问 题 


故 (6.8.7) 式 对 > 1 均 成 立 ， 由 (6.8.7) 式 即 得 (6.8.8) 式 ， 口 

通过 比较 (6.8.8) 式 与 (6.9.2) 式 知 ， xz 与 w+ 有 相同 的 代数 结构 

2. 折扣 积分 型 泛 函 

当 $ 则 当 YX(0) =ie3 时 ，Plr = +oclX0) = 站 = 1 此 时 ， 
W= /7 er es = E(W*|X(0)=i),i€S 
As 

3. 首 达 时 间 与 首 达 目 标 积分 型 泛 函 

当 取 aa=0, 则 Ww= 三 7(X(t))dt 是 首 达 目标 ( 非 折 扣 ) 积分 型 泛 函 , 当 取 7(i) = 
时 ， WW =7 就 是 从 S 到 So 的 首 达 时 间 ， 这 一 类 问题 在 理论 与 应 用 上 更 有 意义 . 我 
们 将 在 下 面 更 详细 地 讨论 它们 . 

连续 时 间 积分 型 泛 函 k 阶 矩 可 以 化 为 离散 时 间 首 达 目 标 一 阶 矩 问题 ， 以 上 几 种 
连续 时 间 积 分 型 泛 函 求解 + 阶 矩 问题 ， 均 可 转化 为 求解 离散 时 间 首 达 目 标 可 加 泛 函 
的 一 阶 矩 问题 ， 确 切 叙 述 如 下 : 

空间 $ = SU 5o, 其 中 ， 5 = {1,2,…,m}), 5o = 
{6}. 一 步 转移 概率 矩阵 P = (Pij),i,j € 5S，R(i) 表示 系统 在 ; 状态 的 性 能 指标 称 
R:5 一 有 R' 为 性 能 函数 ， 了 = 4 : > 0,X(n) = 5] 为 从 S 到 56 的 首 达 时 间 ， 令 
二 当 5 为 瞬时 态 集 时 ， 

= (I- 户 )-!R 是 方程 X= R+PX 的 唯一 解 ( 非 负 最 小 解 ). 一 般 地 , 对 求解 jx.(k > 1) 
我 们 有 以 下 定理 当 取 R(i) 让 Bj S Br(i)Pi, i € 5, Bs =1- es Bi, Bss = 1， 
Ps; = 0,;7 € 5, WW pr = px. i {分 型 泛 函 的 阶 矩 可 以 转化 为 离 
散 时 间 首 达 目 标 可 加 泛 函 的 一 阶 矩 问题 ， 类 似 的 情形 很 多 ， 这 里 不 一 一 列举 ， 


$ 6.9 首 达 时 间 与 首 达 目 标 积分 型 泛 函 的 特性 及 其 反问 题 


连续 时 间 马 氏 链 的 首 达 时 间 及 首 达 目 标 积分 型 泛 函 有 其 广泛 的 应 用 背景 ， 例 如 
系统 的 使 用 寿命 ， 人 工 神经 网 络 训练 达到 要 求 的 时 间 ， 排 队 系 统 中 的 队长 与 忙 期 ， 
通讯 中 信号 的 堵塞 时 间 ， 水 坝 水 位 超过 警戒 线 的 时 刻 等 等 ， 无 不 与 首 达 时 间或 首 达 
目标 相 联 系 ， 本 节 着 重 讨 Y 伦 首 达 时 间 的 分 布 、 生成 函数 及 其 矩 的 关系 ， 及 马 氏 链 的 
反问 题 ， 

我 们 考虑 连续 时 间 M.C.X = {X(t),t > 0}, 在 状态 空间 $= {1,2,… ,7 和 十 1 十 
2,.….}= SUSol( 其 中 5 = {1,2,.…. ,mm}, So = S$—5S= {m+1,m+2,.…} )), 其 转移 率 和 矩阵 


6 = (oh e S(O 亦 称 为 无 穷 小 生成 算 子 ) 及 二 | 人 | 其 中 Q 是 mx 年 抵 


阵 ， 人 0< Prd Si<%, 且 go+Qe=0,e=(1,1,.… ,1), 
0 = (0， 0) 分 别 是 $ 上 的 单位 列 向 量 , 零 列 向 量 ,7 = inf{t :t > 0,X(t) 站 (0)})， 
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Tt 二 inf{t:t> 0,X(t)€ 50}, 易 知 7 是 从 状态 集 5 到 56 的 首 达 时 间 , 规定 inf y = +c>c， 
+ 二 0( 若 X(0) € 50). 7 :5 一 导 +, 7(i) 表示 系统 在 i 状态 对 应 的 性 能 指标 ， 不 失 一 般 
性 ， 设 7( Wase tie 厂 人 -0)- (gy),i,j € 5, 保守， 记 
W = /0 7(X(t))dt 为 首 达 目 标 积分 泛 函 ， 

7 与信 的 抑 与 它们 的 分 布 函数 ， 及 其 Laplace-Stieltjes 变换 ( 亦 称 生 
成 函数 ) 的 关系 ,为 避免 平凡 情况 ， 在 本 节 我 们 设 M.C.X 从 $ 到 5o 以 概率 1 可 达 ， 
即 设 

Plr < +o0|X(0)=i)=1, Vies (6.9.1) 

成 立 ， 为 了 便于 检验 (6.9.1) 式 是 否 成 立 ， 我 们 先 给 出 以 下 几 个 引 理 ; 

引 理 6.9.1 ”从 S 出 发 以 概率 1 可 达 5$o 的 必要 条 件 是 $ 中 没有 吸收 状态 ， 即 
(6.9.1) 式 成 立 的 必要 条 件 是 vie 5,4; > 0. 

证 记 克 = inf{t :t+ > 0,X(t) 到 XX(0)), 用 反 证 法 ， 车 3 € 5 使 a; = 0, 则 


P(m = +%|X(0) = i) = 1, 因为 人 = +%,X(0) Be ) = 引 , 得 
1= P{ = 二 ccl|X(0) = 计 < P(r= +o|X(0) = <1—o P(r=+%|X(0) = )= 1, 这 与 
假设 vi e 5, Ptr < wo|X(0) = 1) 相 矛 盾 ， 品 


引 理 6.9.2 (6.9.1) 式 成 立 的 充 要 条 件 是 限制 在 S 上 的 Q 矩阵 @ = (qij),i.j E 3 
非 奇 异 ， 
证 记 所 =P(r < olX(0) =i),ie Ss, f= (fi€S), Po=g!gio, go (goie 
5S). 由 全 概率 公式 及 强 马 氏 性 ， 有 = orloo+ 了 ijesg Qjfji,iE 5S, 写成 向 量 形 
式 ， 并 注意 到 do 一 —Qe, eo—= (1, 1,. oy ws 即 有 
Qf = Qe (6.9.2) 
若 Q 非 奇 异 ， 即 8-! 存在 ， 则 f = 。 是 (6.9.2) 的 唯一 解 ， 即 fi = P(7 < |X(0) = 
j=1Vies. 
下 证 当 f=。 时 ， Q 非 奇 异 ， 用 反 证 法 ， 假 设 Q 奇异 ， 则 存在 一 非 负 、 非 零 的 
行 向 量 w vT = 0. 故 对 所 有 t > 0, 有 wee8te = ve > 0, 且 向 量 ， 全 im; ,ow elQte 0, 从 
而 vu = ve > 0. 这 表明 至 少 存在 一 状态 ie 5, 使 得 f; = 1 w<1, 牙 盾 ， 故 Q 非 奇 
异 ， 口 
令 Pj; = 6 十 4q719y, 卫 = (Pij),i,j € 5, po = p(P) 为 P 的 谱 半 径 ， 进一步 我 们 有 
引 理 6.9.3 ”下 面 命题 等 价 : 1”f=e; 2”9-! 存 在;，3”X 在 $ 中 无 任何 
闭 子 和 集 ; 4°” po<1; 5° 1i<+o. 
证 ( 略 ， 有 兴趣 的 读者 可 以 作为 练习 自己 证 明 ). 
Gini iis > Qilix 
isi isR24' givin 


i Mi (i1,i2, ,Lx) = l , . 为 由 矩阵 Q@ = (qij) ) 的 第 ; $1 t2 


Qixris Qixiz es inig 
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行 与 第 加 , 因 …… ,i 列 的 交叉 元 素 构成 的 阶 子 和 矩阵，1< RS,1< ii < 轨 …< 
i < n, dr(ilyio, ,iy) = (~1)*det My (i1,i2,.:- 

引 理 6.9.4 区 6.9.1) 式 成 立时 ， 有 (一 1)* dla > 0 YI1 <k<m, 
1<i<i<2<.…<z 加 <m, 即 -0 是 rs 矩阵， 

证 注意 到 当 | 6.9.1) 式 成 立时 , S 中 没有 任何 闭 子 集 , 故 任 取 5; = {ii,is,… ,i} C 
S, 对 Y1<E<mT<ia<ia< :<t<gm 则 从 5 必 以 概率 1 到 达 58=5$--S,. 这 
表明 Q 的 主子 矩阵 Mi(ii,is,… , 计 ) 为 对 角 占 优 不 可 约 矩 阵 ， 且 至 少 有 一 行 对 角 严 
格 占 优 ， 可 知 Mi 非 奇 异 ， 再 由 有 关 完 阵 分 析 及 行列 式 性 质 即 得 (一 Mi) 是 Minkoski 
和 矩 阵 ， 且 (一 1)*dx(ii,i2, ,bn) = det(—Mx(ii,io,: ,iy)) > 0. 

本 节 以 下 均 在 (6.9.1) 式 成 立 下 讨论 , 令 Qa = diag(gi,i€ 5), Mo = maxies 7(i). 
Jr(i) = EB(T*|X(0) = 0), J(i) = E(WYIX(0) = i), i€ Ss, J = (J(i),i Ee S$), 
J = (J(i),i€E S$), Jr = QJy, J = Qjyx. 

定理 6.9.1 

1” Vk > 1,Jx,Jx 满足 方程 : 


J = EkQF r+ QI (QO+QaU)T, J =kQ7 Ti+ Q7 (0 + Qa) (6.9.3) 


J = (-1)kQ le J =—kQ-1(J107), 其 中 Ji or7= (J(i)r(i),i€E S) (6.9.4) 


(Jx| < Rips*, 了 SR (6.9.5) 


证 1”: 注意 到 在 $ 6.8 定理 6.8.2 的 式 (6.8.7) 中 ， 当 a = 0 时 ， 即 得 (6.9.3) 
式 ， 


2" 、3" : 由 (6.9.3) 立 得 (6.9.4) 及 (6.9.5) 式 ， 口 
令 : F(z) = P(7 < z|X(0)=0), F(z) = P(W < z|X(0)=i),i€eS,z>0,s>0. 
F(z)= ee F(z) = 1 ao0 丽 (z 2). 
记 Gi(z) = P(ni < zlX(0) =0)=(1-e-r)lrzo 7() Eni 对 书 (z), 责 (z) 有 
定理 6.9.2 
F(t)= qr lg;oGi(z ZT)+q; 外 >》, 人 Fi(z — u) dGi(u) (6.9.6) 
J 天 ;JES 
F(z) = qr lgioGi(zr 1(i)) + gr! 2 mf 2 (2 — uri) dGi(u) (6.9.7) 
JZiJES 


证 令 下 =inf{t:t>0,X(n+jE S50}, 站 请 =X(ni+), 则 7=n+7. 注意 到 
放 与 X(n1) 关于 X(0) = 条 件 独立 ，ni 与 XX(ni+t) 关于 X(0) = i 条 件 独立 ， 再 由 
全 概率 公式 与 强 马 氏 性 ， 即 可 得 (6.9.6) 及 (6.9.7).( 可 参考 上 节 定 理 6.8.1 的 证 明 . ) 
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注意 到 ， 若 令 4 = gqijr7 Giltz) = Gilzrr) = (1 一 ear7 Tso), Q = (gj) 仍 

为 Q 矩阵 ， 且 9-! 存在 ， 则 (6.9.7) 式 化 为 
Fl) = 再 6oGi(z) + G1 DG [ 而 (z — uw) dGlu) (6.9.8) 

jesS 
由 (6.9.8) 式 说 明 , 首 达 目标 积分 型 泛 函 问题 可 化 为 首 达 时 间 问 题 ， (要 求 7(i) > 0,iE 


5). 故 下 面 只 需 讨 论 首 达 时 间 的 问题 ， 
设 5 = {1.2,…,p} 有 限 ， So = {0}, 且 (6.9.1) 式 总 成 立 ， 并 设 过 程 的 初始 分 


布 为 : wa = {oar ap,0). oi > 0i€E Scsa=1. 记 ®i(s) = [0 edF(z), 
Bi(s) = 六 edFi(z), i€ S, 2 >0,s>0. (8) = DiBi(s), B(s) = Die 二 
F(z) = {F(z).i€ SY, ®(s) = {®i(s),i€ S}. 


定义 ” 称 从 5 到 56 的 首 达 时 间 0 F(z) = P(r<z) 为 Phase-Type 分布 
简 记 为 PH 分布. 称 8(s) = /0 ee **dF(z),s>0 PH p 分 机 的 生成 函数 即 B(s) 是 
F(z) 的 Laplace-Stieltjes 变换 ， 


定理 6.9.3 
Bi(s) = (s+g) got+(s+g)! >》 qT)( (6.9.9) 
JES 
G(s)=(sT— Q)-!lgo, s>0 (6.9.10) 


证 ”对 (6.9.6) 式 两 边 取 Laplace-Stieltjes 变换 ， 即 得 (6.9.9) 式 ， 再 注意 到 当 s > 0 
时 ， 和 矩阵 (sT - 8) 是 主 对 角 严 格 占 优 和 矩阵 ， 故 (sT - 8)-! 存在 ， 从 而 (6.9.9) 方程 有 
唯一 解 ， 即 (6.9.10) 式 成 立 ， 口 

由 (6.9.10) 式 可 知 F(x) = {Fi(z) ae 3) 二 Od 完全 由 过 程 在 3 上 
的 无 穷 小 生成 子 8 唯一 决定 ， 而 $(s) = a®(s F(z) = aF(z 2 及 Q 
唯一 决定 ， 因 此 ， 可 用 Re ), 记 为 F(z 0 v, z) 的 一 个 
表示 ， 

对 于 首 达 时 间 的 分 布 函数 F(z) 、 生 成 函数 8(s) 及 抢 {4,k > 0}, 我 们 有 以 下 

定理 6.9.4 GB(s) 由 其 矩 {71,k > 唯一 确定 ， 即 存在 so > 0, 使 当 |s| < so 时 ， 





/1k 
a(s) = = 人 (6.9.11) 


证 ”证 明 从 略 ， 
邻 aj = 王族 人 CJ = {ak(ESI7 其 中 必 ( 人 =(-10OA vie Ss Na =awak， 
B(s) = a@(s)， i 。 且 


226 屏 
51 2 》、 won (6.9.12) 


村 = 共 


记 Bl(k,rT)= (ak,akr+l ,ak+r-i) ,Rk>0,r>1. 
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引 理 6.9.5 rankB(k,p) = rankB(0,p),vk > 0. 

证 明 , 因为 a = Q-*e， rankQ-1t=p， 所 以 vk > 1， 

B(k,p) = (Q-te, -ttYe,...,Q-(ttr-Ye) = Q-*+1(Q-1e,Q-?e,...,0Q-?e) = Q-*+1B(1,p). 
即 rankB(k,p) = rank B(O,»). 

定理 6.9.5 1° Vk > 1. 


ak = Qe= Qla,_y, (6.9.13) 
Qar. = ak_1， 
2° Vk > 1, 
G(ak,ak+l， 9 ak+p-1) 三 (ak-1,81 3， ak+p-2), (6.9.14) 
QB(E,p) = B(E — 1,p), (6.9.15) 
3° 若 rankB(1.p)=p， 则 
Q@= B(0,p)B (1,p) = B(k — 1,p)B- 1(k,p), (6.9.16) 
qo = —Qe=—B(0,p)B- (1D)e， (6.9.17) 
且 F(z) ~ (a@,B(0,p)B-1(1,p)), 即 条 件 分 布 (zj,ie 5) 由 7 的 前 p 阶 条 件 矩 只 
一 确定 ， 
VE > 1， 
ak = B(1,p)B (0,p)ak_l = [B(1,p)B-1(0, p)]'e, (6.9.18) 


各 车 rankB(1,p)=p， 则 {ax,k>0} 由 B(1,p), and {ax,k> 0} 唯一 决定 ， 且 是 
最 小 阶 为 p 的 差分 序列 。 

证 明 . 由 (6.9.4) 式 可 得 1? 、2? 和 3。 。4 可 以 由 差分 序列 的 性 质 得 到 。 

以 上 结果 说 明 ， 当 detB(1,p) 关 0 时， 可 由 B(1,p) 反 求 其 无 穷 小 生成 元 9. 这 就 
是 马 氏 链 中 的 一 类 反问 题 , 

当 B(1,p) 不 满 秩 时 ， 有 以 下 定理 : 

定理 6.9.6 若 rankB(1,p) =7,1<r<p， 则 经 过 重新 排列 可 得 rankB(1,7) = 7， 
i Sa = {12 js) = $232...)2280， 则 


Qi) = B(O0.7)B™ (1,7), (6.9.19) 
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是 状态 空间 为 5(13.…,,) 的 马 氏 链 的 最 小 生成 子 ， 且 其 条 件 生成 函数 为 


F(z) ~ (ef Ga E S12 ,7): (6.9.19a)， 
证 明 . 类 似 于 定理 6.9.5 的 证 明 . 
由 定理 6.9.6 可 知 , 若 rankB(1.7) = ， ， 我 们 就 可 以 用 状态 空间 S12.. ,上 的 条 


件 矩 来 计算 0,3.…,;，。 但 是 8(1.3…,,) 只 能 表示 状态 集 Sa >.… 的 性 质 ， 对 于 其 它 
状态 的 性 质 ， 这 个 定理 没 能 给 出 一 个 令 人 满意 的 答案 。 下 面 的 两 个 定理 就 对 B(1,p) 
不 满 秩 的 情形 做 了 补充 ， 首 先 给 出 两 个 不 同 状态 集 上 最 小 生成 子 的 关系 。 
以 Bi(k,7) 记 (ar(D,arri(D) arr Vi E 5 即 B(k,7) 和 矩阵 的 第 1 行 。 
由 rankB(1,p) =7+， 我 们 可 以 假定 rankB(1,7) =7， 则 (2.21) 式 可 写 为 
Bi(0,7) Bi(1,7) 
QU ar) SR : : , (6.9.20) 
Br(0,7) B.(1,7) 
由 于 B(1,7) 的 前 : 行 是 线性 无 关 的 ， 其 它 p -7 行 可 以 被 前 7 行 线性 表示 。 因 
此 有 : 


Br(1,7)= PBI(LT)+ .+BB (Lr) = > BB(Lr)r+tl<k<p (6.9.21) 
下 


由 差分 性 可 知 ， 对 B(0,7) 同样 有 ， 


Bi(0,7) = 二 左 Bi1(0,7) 十 … 十 成 B,(0,7) = VBLBi(0, 7)r+1l1<k<p (6.9.21a) 
FE 
因为 Br(0,7) 的 第 一 个 元 素 为 1， 所 以 有 1B =1。 
对 vi e 5，, 我们 都 可 以 找到 B(0,7) 的 "1 行使 得 这 7 行 线性 无 关 。 这 是 因为 一 
定 存在 : € {1, bt :让 使 得 6 天 0 » 不 妨 假定 及 * 0 3» 则 Bx (1,7), Bs(1,7),: SN :Br(1,.7) 


Bir, (1,7) 
线性 无 关 。 我 们 可 以 假定 rank | Ep 
BA (1,7) 
于 是 有 : 
Br (1.7) 
定理 6.9.7 着 "am : | 地) 
Br (1,7) 
上 的 最 小 生成 子 Q(x,.… ,x 满足 
Bl, + PB, 8 Bl BY 
QI Qa ; (6.9.22) 


Be. ‘Br Bi Br 
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Bi, (0,7) Br,(1,7) 
证 明 , 由 于 Q(x.4,) = : : ， (6.9.23) 
Bx,.(0,7) Br,(1,7) 
Bx, (0,7) 大 成， B1(0,7) 
: = 人 : (6.9.24) 
Bx,(0,7) Bi, 1 成 ， B, (0,7) 
Budn /Br) /Bp, BY 
: = : ; : (6.9.25) 
Bx, (1,7) B,(1,7) BE, 7 BB, 


则 (6.9.22) 可 以 很 容易 得 到 。 
再 给 出 @d>…," 与 原来 PH 分 布 的 最 小 生成 子 9 之 间 的 关系 。 
定理 6.9.8 对 任意 给 定 的 初始 分 布 & = (a,0) = (QQ2,… ,ay,0) ， 做 变换 


p 也 
(yi) = a+ >》 Bhar ,ar > Bhar), 
人 =7 十 1 大 二 水 二 
把 了 = (7,0) 当 作 新 的 拟 初始 分 布 ， 就 有 (a,Q) 和 (7,@d >))) 表示 的 PH 分 布 相 
同 。 
证 明 ， 由 于 (3915 全 ,Yr) 一 (Wi Baek, i ‘rt Dh Brax) ¥ 及 Di a 
1 ， 可 以 得 到 ,Y= 1， 把 看 作 一 个 新 的 拟 初 始 分 布 ， 


Bi(1.7) Bi(1,7) 
(ad 0) = (a1 Gap) = (71，… ,7r) (6.9.26) 
Bo(1,7) B,(1,7) 
Bi(1,7) 
而 : 即 为 以 Q(13.…,,) 为 最 小 生成 子 的 PH 分 布 的 条 件 矩 矩阵 ， 所 以 由 
B.(1,7) 


(6.9.26) 式 可 知 (a, 8) 和 (Y, Q(1.3,…,n)) 所 表示 的 PH 分 布 的 前 7 阶 矩 相等 。 由 于 这 两 
个 PH 分 布 的 抢 序 列 都 是 阶 的 差分 序列 ， 前 * 项 相等 则 整个 序列 相等 ， 即 这 两 个 
PH 分 布 的 各 阶 矩 都 相等 。 由 定理 6.9.3 可 知 ， PH 分 布 的 有 限 阶 矩 可 以 决定 分 布 函 
数 和 生成 函数 。 所 以 它们 表示 的 是 同一 个 PH 分 布 。( 有 兴趣 的 读者 可 以 自己 证 明 . ) 
这 里 研究 条 件 矩 向量 ， 避免 了 由 初始 分 布 a 带 来 的 复杂 性 。 因为 v 是 转移 率 ， 
而 首 达 时 间 的 条 件 矩 恰恰 就 描述 了 马 氏 链 弟 咯 状态 转移 的 性 质 ， 所 以 我 们 可 以 从 条 
件 矩 求 得 8 。 另 一 方面 ， 如 果 我 们 用 分 布 函数 或 是 生成 函数 ， 就 把 初始 分 布 和 9 的 
信息 混杂 在 一 起 ， 
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这 样 我 们 就 会 得 到 有 至 少 p? 个 未 知 数 的 p 个 非 线 性 方程 ， 很 难 从 中 得 到 Q 。 
前 面 的 几 个 定理 说 明 ， 从 条 件 抢 的 角度 出 发 ， 如 果 B(1,p) 满 秩 ， 则 9 被 唯一 决定 ， 
Q@ 和 更 可 以 被 显 式 表 出 ; 而 当 B(1,p) 不 满 秩 时 ， 我 们 就 可 以 找到 一 个 更 小 的 有 限 状 
态 的 模型 来 刻 划 整个 马 氏 链 。 在 要 求 条 件 分 布 向 量 相 等 的 条 件 下 ， 可 以 构造 一 个 新 
的 > 阶 的 9 代替 原来 p 阶 的 8, 再 对 初始 分 布 进行 变换 ， 使 变换 后 的 初始 分 布 
和 9u…,) 表示 的 就 是 原来 的 PH 分 布 ， 可 以 说 这 在 一 定 意义 上 把 PH 分 布 最 小 表 
示 的 问题 推进 了 一 大 步 。 

以 上 结果 有 广泛 的 应 用 背景 ,因为 有 时 一 个 M.C{X(t),t > 0} 常常 不 知道 转移 矩 
阵 9 = (qi), 也 不 知道 8(s), F(z), 但 其 首 达 时 间 是 可 测量 的 ， 这 样 就 可 以 应 用 以 上 
结果 求 其 8(s) 及 F(z), 甚至 可 构造 一 M.C., 使 其 首 达 时 间 的 概率 特性 为 已 给 定 的 ， 


§ 6.10 状态 分 类 


对 于 连续 参数 的 马尔 可 夫 链 开 = {X(t),t > 0}, 任 取 h>0, 定 义 
Xn (h) 二 n> 0. 


由 马 氏 性 知 ， {Xnw,n > 0} 是 一 个 离散 时 间 的 马尔 可 夫 链 ， 称 为 以 为 步 长 的 离散 
骨架 , 或 简称 4 骨架 .h 骨架 的 转移 概率 矩阵 即 为 P(h) = (Pij(h)),n 步 转移 概率 矩阵 则 
为 P(nh). 离散 时 间 马 尔 可 夫 链 的 许多 性 质 与 结果 ， 通 过 离散 骨架 必定 在 连续 时 间 
马 氏 链 身 上 有 所 反映 .这 也 是 我 们 利用 已 知 结果 讨论 连续 时 间 马 氏 链 的 一 条 有 效 途 
径 ， 

与 离散 时 间 的 马尔 可 夫 链 一 样 ， 我 们 对 连续 时 间 的 马尔 可 夫 链 也 要 讨论 状态 的 
分 类 ， 转 移 概 率 函 数 的 极限 性 质 以 及 平稳 分 布 ， 有 些 概念 ， 例 如 两 个 状态 的 相通 及 
在 此 基础 上 所 做 的 状态 分 类 等 ， 可 以 直接 从 离散 时 间 情 形 搬 到 连续 时 间 情 形 ; 但 也 
有 些 概念 ， 例 如 常 返 性 及 正常 返 性 等 ， 却 无 法 立即 照搬 过 去 .为 了 使 我 们 的 讨论 只 
需 用 初等 的 方法 ， 我 们 将 通过 对 离散 骨架 的 状态 分 类 的 讨论 ， 建 立 起 连续 时 间 马 尔 
可 夫 链 的 状态 分 类 .这样 做 可 以 充分 利用 离散 时 间 情 形 的 已 知 结果 ， 

定义 若 存在 上 > 0, 使 PB; > 0, 则 称 由 状态 i 可 达 状 态 j, 记 为 i 一 j. 若 对 一 切 
t > 0, Pij(t) = 0, 则 称 由 状态 i 不 可 达 状 态 j, 记 为 i 刀 j 车 i 一 j 且 ;一 i, 则 称 状态 
i 与 了 相通 ， 记 为 1 一 小 

由 此 定义 知 ， 完 全 类 似 地 ， 可 达 与 相通 关系 有 传递 性 ， 从 而 可 以 按 相 通关 系 给 
状态 分 类 ， 两 两 相通 的 状态 组 成 一 个 状态 类 ， 车 整个 状态 空间 是 一 个 状态 类 ， 则 称 
该 马 氏 链 是 不 可 约 的 ， 230 

上 面 这 些 定义 与 离散 时 间 情 形 是 完全 相同 的 ， 建立 在 可 达 与 相通 关系 上 的 其 它 
概念 (如 闭 和 集 等 ) 和 结果 都 可 以 搬 过 来 使 用 ， 继 续 有 效 ， 我 们 不 再 重复 叙述 了 ， 


6.10 ”状态 分 类 


定理 6.10.1 下 列 命题 等 价 : 

(1) 由 状态 ; 可 达 状 态 j; 

(2) 对 任意 的 h 骨架， 由 i 可 达 j; 

(3) 对 某 一 个 骨架， 由 i 可 达 j( 记 为 i 汪 池 . 

证 明 (2) 全 (3) => (1) 是 显然 的 ， 只 要 证 (1) 入 (2). 设 t1>0 使 P(t) >0. 取 nn 充 
分 大 使 nh > +, 则 由 C 一 下 方程 知 ， Pij(nh) > Pij(t)Pjj(nh 一 t) 又 由 定理 6.1.1 的 证 明 
知 Vt>0, 有 Pj;(t) > 0, 故 





Pi(nh) > Pij(t)P;;(nh—t)>0 


即 ; 之 这 对 一 切 疡 > 0 成 立 ， 口 

在 定理 6.10.1 中 ， 将 可 达 改 为 相通 显然 也 是 成 立 的 ， 因此， 该 定理 说 明 ， 从 一 个 状 
态 是 否 可 达 另 一 个 状态 ， 两 个 状态 是 否 相 通 ， 对 全 部 离散 骨架 和 原来 的 连续 时 间 马 氏 链 
都 是 一 致 的 ， 从 而 他 们 的 状态 类 也 都 是 一 致 的 ， 很 自然 的 ， 我 们 希望 一 个 状态 是 常 返 的 
或 非常 返 的 ， 正 常 返 的 或 零 常 返 的 ， 也 应 该 对 全 部 离散 骨架 都 是 一 致 的 ， 另 一 方面 ， 离 
散 时 间 情 形 定义 状态 为 常 返 的 或 非常 返 的 ， 正 常 返 的 或 零 常 返 的 方法 却 不 能 直接 搬 到 连 
续 时 间 情 形 ， 这 也 迫使 我 们 试图 从 离散 骨架 的 状态 性 质 去 寻找 解决 问题 的 途径 ， 这些 考 
虑 导致 下 面 的 结果 . 

定理 6.10.2 对 任意 的 ie 3, 若 


/ Pi(t)dt = co， (6.10.1) 
0 


则 对 一 切 h > 0， 
Dj Pi(np) = ~. (6.10.2) 


反之 ， 若 对 某 一 个 h > 0,(6.10.2) 式 成 立 ， 则 (6.10.1) 式 成 立 . 

证 明 略 ， 可 参见 国 ， 

由 该 定理 可 知 ， 一 个 状态 是 常 返 的 或 非常 返 的 ， 对 全 部 的 离散 骨架 来 说 是 一 致 的 . 
这 就 自然 的 引出 以 下 定义 . 

定义 对 连续 时 间 马 氏 链 ， 一 个 状态 成 为 常 返 的 或 非常 返 的 ， 铬 对 全 部 离散 骨架 
这 个 状态 是 常 返 的 或 非常 返 的 . 

定理 6.10.2 也 提供 了 常 返 的 判别 法 : 状态 i 为 常 返 的 充 要 条 件 是 


人 Pi(t)dt = ~. 
0 


为 了 进一步 讨论 正常 返 与 零 常 运 ， 我 们 也 要 先 讨论 转移 概率 函数 的 极限 性 质 ， 在 离 
散 时 间 情 形 ， 由 于 状态 可 能 是 周期 的 ,， 因 丽 使 情况 复杂 化 了 . 但 在 连续 时 间 情 形 ， 由 于 对 
一 切 h > 0 及 正 整数 ” 对 一 切 ;< 5,Pi(nh) > 0, 对 任意 离散 骨架 ， 每 个 状态 都 是 非 周期 
的 . 所 以 ,周期 的 概念 对 连续 时 间 马 氏 链 就 不 需要 了 ,由 周期 性 造成 的 麻烦 也 就 没有 了 . 
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定理 6.10.3 对 一 切 i,j &€ 5, 存在 极限 
Ln 大庆 不 二 个 六 


证 明 略 ， 可 参见 峡 ， 
由 该 定理 可 知 ， 对 一 切 h > 0 极限 


lirm Po(nh) ni nh 
R00 


与 无 关 ， 因 此 一 个 常 返 状态 i 为 正常 返 的 (ri > 0) 或 零 常 返 的 (ri = 0) 对 全 部 离散 骨 
架 来 说 也 是 一 致 的 ， 类 似 的 给 出 下 面 的 定义 . 

定义 对 连续 时 间 马 氏 链 ， 一 个 常 返 状 态 称 为 正常 返 的 或 零 常 返 的 ， 若 对 全 部 离 
散 骨 架 这 个 状态 是 正常 返 的 或 零 常 返 的 . 

状态 i 为 正常 返 的 充 要 条 件 是 到 > 0. 


练习 题 


6.1 设 {N 人 ,> 0} 是 参数 为 和 的 Poisson 过 程 ， 过 程 {X(t),t > 0} 定义 为 {X(t) = 
1} = Un-oVO = 27) , {XH = 0 = UVico NY = n+ 1), 试 证 {X(t),t > 0 为 
MC ， 并 求 P(t) 与 9 = (gij)。 

62 设 {Xt>00 为 MC，5=1{01}，Q= . ) ， Po(0)=1, 
ni1=inf{t:t>0,X(t) FX(0)} 8 

求 EB(X(t)), E(n|X(0)=0), cov(X(s), X(t)), E{X(s+t)|X(s)=1}.。 

6.3 设 {N(t),t > 0} 是 参数 为 和 的 Poisson 过 程 ， 且 设 每 次 到 达 被 登记 上 的 概率 为 
p ， 并 与 其 它 到 达 独 立 。 记 {Nj(t),t > 0} 为 登记 到 达 的 过 程 。 证 {NN,(t),t > 0} 是 参数 为 
DA 的 Poisson 流 。 

6.4 设 {Ni(t),t > 0} 是 参数 为 和; 的 Poisson 过 程 且 相互 独立 (i=1,2)。X(t) = Ni(b) 一 
Na(t), P(t) = P(X(t)=n), n€EZ= 1{0,+1,+2,..}, T= inf{t:t>0,Ni(t)=k}, 
试 证 

> P(t)z" = eitAa)t ,olAiz+tAa/2)t 
并 求 B[X(t)] ， EE(X(t)?) 及 P(T < TIN(0) = Ns(0) = 0)。 

6.5 下 列 三 个 生 灭 过 程 的 参数 分 别 为 232 

1” 和 》Xn =， 0<d<1，》 和 >0，72>0，hn =，7>1，Hn=0: 

2° hh=An+1) ll, A>0n>0), pm=p4, (n>1), jo=0; 


练习 题 


3 ”有 迁 入 的 线性 增长 模型 : 和 二 nA+a, pan=n4,， 和 >0,， jy>0, a>0 
(不 妨 设 3 < 1 ) 

试 求 相应 的 平稳 分 布 。 

6.6 设 {X(t),t > 0} 是 纯 生 yule 过 程 {A = nA,p =0, 和 入 >0}, 证 


n—1l 
nl1 
P(X(t) >n|X(0)= N)= > Zn n>N. 
k=n—N 天 
gq=1-p=e\, 


并 证 
E[X(t) =e’, VarX(t)=e (1—e *). 
6.7 设 {X(#),t > 0} 为 纯 灭 过 程 (A = 0,p = 二 np4>0,n>1), 设 X(0)=i， 求 


Palt) = P(X(t) = 7), ELX(t)], VarlX(t)]. 


nn 


EP (如 -~ | 1 ) ennt(1 es eHt)in), EI[X(t)] = ie 一 At， 


Var[X(t)] = ie "(1 — er)}. 


6.8 设 {Xi;(),t > 0}(i = 1,2) 是 二 个 互相 独立 、 有 相同 参数 和 的 yule 过 程 ， Xi;(0) = 
nmi， 入 >ni 十 n2， 给 定 Xi1(t) 十 X(t) = 入， 试 求 X1(t) 的 条 件 分 布 律 。 

6.9 考虑 M/M/s 排队 系统 ， 顾 客 按照 参数 为 和 的 Poisson 流 到 达 一 个 有 s 个 服务 员 
的 服务 站 。 每 个 顾客 一 到 来 ， 如 果 有 服务 员 空 间 ， 则 直接 进入 服务 ， 否则 加 入 排队 行列 等 
待 。 当 一 个 服务 员 结 束 对 一 位 顾客 服务 时 ， 顾 客 即 离 开 系 统 ， 排 队 中 的 下 一 顾客 立即 被 
服务 〈 若 有 顾客 等 待 ) 。 假 定 相 继 的 服务 时 间 是 相互 独立 ， 且 参数 为 /的 指数 分 布 的 随机 
变量 ， 如 果 以 X(t) 表 时 刻 t 系统 的 顾客 数 ， 则 {X(t),t > 0} 是 生 灭 过 程 。 


"| mh Snes ,Mn = 和 A,n>0. 
SK n>s 
设 p= 六 <1，Q(t) = max(X()j 一 s,0) 是 t 时 等 待 的 顾客 数 。 

1” 求 系统 的 平稳 分 布 ; 

2 ”证明 在 稳 态 下 

7 = P(Q(t)=0) 
= (50(sp) /il) {307 ops) /il) + [(sp)*p/(s!(1 — p))]} 
BE[Q(t)] = a r)(1—p) 

6.10 一 家 由 一 个 理发 员 营 业 的 小 理发 店 ， 至 多 能 容纳 两 个 顾客 ， 顾 客 到 达 是 速率 为 

每 小 时 3 人 的 Poisson 流 ， 相 继 服务 时 间 是 均值 为 + 小 时 的 指数 随机 变量 。 求 


”上 店 中 顾客 的 平均 数 是 多 少 ? 
2。 进 店 的 顾客 比例 ; 
”车 理发 员 能 加 快 一 倍 地 工作 ， 他 会 多 做 多 少 生 意 ? 

6. | ),t > 0}(i = 1,2) 是 两 个 相互 独立 的 可 道 马 氏 链 , 证 明 {X1(t), X2(t),t > 
0} 也 是 可 逆 链 。 

6.12 考虑 参数 分 别 为 Ni ,Ai 的 两 个 M/M/Y1 排队 系统 , 其 中 入; < pi(i = 1,2)。 假设 它 
们 共同 使 用 一 个 容纳 n 个 人 的 候 客 室 〈 即 每 当 候 客室 占 满 时 如 再 来 客 都 自行 离 去 消失 )， 
计算 在 第 一 个 系统 中 有 k 人 (当天 > 0 时 1 人 在 接受 服务 而 k-1 在 候 客 室 等 待 ) 而 1 人 
在 第 二 个 系统 的 极限 概率 (提示: 利用 6.11 习题 的 结果 ) 。 

6.13 考虑 一 个 M/M/x 排队 系统 ， 具 有 编号 为 1， 2 ，… 的 通道 (服务员) 顾客 
一 来 就 挑选 编号 为 最 小 的 通道 接受 服务 。 于 是 我 们 可 以 认为 一 切 来 到 全 部 发 生 在 1 号 通 
道 ， 当 发 现 1 号 通道 忙 着 的 顾客 就 溢出 而 变 成 2 号 通道 ， 当 发 现 1 号 与 2 号 通道 都 忙 着 
的 顾客 就 溢出 变 成 3 号 通道 ，.…. 等 等 。 在 稳 态 下 

1" 1 号 通道 忙 时 占 多 少 比 例 ? 

2 " 通过 考虑 相应 的 M/M/2 消失 系统 ， 确 定 2 号 通道 忙 时 的 比例 。 

3 ”对 任意 第 C 号 通道 忙 时 比例 是 多 少 ? 

4” 从 CC 号 通道 到 C+1 号 通道 的 溢出 率 是 多 少 ? 相应 的 溢出 过 程 是 Poisson 流 ? 并 
加 以 解释 。 

6.14 一 排队 系统 在 任 一 时 刻 的 工作 量 定 义 为 该 时 刻 系统 中 全 体 顾客 的 剩余 服务 时 间 
之 和 ， 试 求 稳 态 时 的 M/G/1 排队 系统 工作 量 的 期 望 值 与 方差 。 

6.15 设 对 = {X(t),t > 0} 为 稳 态 下 的 遍历 马 氏 链 ， Q@ = (gi;),(Pj,7 > 0) 为 平稳 分 
布 ， 把 状态 空间 S 分 为 二 个 子 集 9S= BuUHDc<，Bc=G，VeEB 


T=inf{t:t>0,X(0)=1,X(t)eG} 





Fi(s) = B{e TX(0)=), Py = g/g 
了 到: 
T, = inf{s:s>0,X(t)eG,xX(t)eB,xX(t+i+s)¢ B}, 

T, =inf{s:s>0,X(t)e€ B,X(t+s) ¢ B}. 
1° 求 P{X(t)=ilX(t)eE BhieB, 
2°。 求 P{X(t) =ilX(t) eB,X(t-)eG)}. 
3° 证 

Pi(s)= gi(g ts) 1d Fi(s)P;; + > Pl. 

jEB JEG 

4° 234 


> >》 ,Pig = >》 Pa. 


jEGJIEB i€EBJEG 


练习 题 


5 ”利用 3 ”及 4"， 证 


s》 PF(s)= >》 》 Pas(l— FB(s)). 


iEB i€EGJEB 


6” 利 用 2” 试 推导 


二 
Be-sm|X(t)EG, X(t) € B] = 5 > Bp 也 po 


tiE 呈 7EG jEGkEB 





7” 利 用 5 及 6 ,证 


>， Pi = 有 >， om E{T,|X(t )€ G, X(t)€ B}. 


jE€B teEGFEB 


8” 利 用 1”、5”、6” 及 7° ,证 





Ef{e |X(t)e B}=[1- Ele ST™|X(t-) eG,xX(t) eB) 
{sEIT,|X(t) € G, X(t) € BI}-! 
9” 利 用 8” 与 Laplace 变换 的 唯一 性 ， 证 
P{m < s|X(t)€ B} = | 大 P{T, >uX)EGTGHEGJdu|. 
{EIT, X(t ) € G, X(t) € B]}- 1. 
10” 利 用 9 证 
BE{Tr|X(t)€ B} 


= EIT?|X(t")€ G,X(t)€ B)2E(T X(t ) € G, X(t) € B)-! 
> EIT,|X(t-)€G,X(t)e Bl. 


6.16 设 {X(t),t > 0} 是 纯 生 过 程 ，A, = nA 二 6,n > 0, 和 ,6 > 0，, 求 其 P(t) = (Pij(t))。 
6.17 设 {X(t),t> 0} 是 生 灭 过 程 , 和 = nA+t6,n>0,A,6>0,p0=npn>1,n>0, 





证 
1"” 入 >/ 或 和 =A<6 时 ， 链 为 非常 运 的 ; 
2” 入 =>56 时 ， 链 为 零 常 返 的 ; 
3” 入 </ 时 ， 链 为 正常 返 的 ， 且 这 是 平稳 分 布 为 
入 入 


入 0 6/ 入 
= 一 一 一 一 一 (一 | 一 一 一 业 二 过: > 
(Ls 二 
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6.18 一 个 汽车 加 油 站 只 能 给 一 辆 汽车 加 油 ， 加 油 时 间 服 从 参数 为 4 的 指数 分 布 ， 各 
辆 汽车 的 加 油 时 间 相互 独立 ， 加 油 的 汽车 按 参 数 为 和 的 Poisson 过 程 到 达 ， 当 一 辆 汽车 


第 六 章 ”连续 参数 马 氏 链 


来 到 加 油 站 发 现 站 中 已 有 n 辆 汽车 时 ， 以 概率 -7 立即 离 去 ， 以 概率 -三 留 下 来 排队 ， 
记 针 (t) 为 时 刻 加油 站 中 汽车 的 数目 , 证 {XX(),t > 0} 为 正常 返 不 可 约 链 并 求 其 平稳 分 
布 。 

6.19 一 个 系统 由 n 个 不 同 的 部 件 毕 联 构成 ， na 个 部 件 的 寿命 分 别 服从 参数 为 X; 的 
指数 分 布 ， 失 效 后 的 修理 时 间 分 别 服从 参数 为 /4; 的 指数 分 布 ， 若 n 个 部 件 都 正常 工作 ， 
则 系统 处 于 工作 状态 ; 若 有 某 个 部 件 失效 ， 则 系统 失效 ， 这 时 修理 工 立 即 对 失效 部 件 进 
行 处 理 , 其 余部 件 停止 工作 ， 若 失 效 部 件 修 复 ， 所 有 部 件 立即 进入 工作 状态 ， 从 而 系统 处 
于 工作 状态 。 假 设 各 部 件 的 失效 与 否 相互 独立 ， 求 系统 处 于 工作 状态 的 概率 。 

6.20 设 M.C. {X(t),t>0}, $=1{0,1,2}, x(0)= (0,01,02),0; > 0, im=1, 


T=inf{t:t>0,X(t) = 0}), 求 : 
1” 7 的 分 布 及 E72; 
2” 了 的 分 布 及 BT 。 
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第 七 章 ”随机 微分 方程 


$7.1 五 空间 和 均 方 收敛 


在 许多 情况 下 ， 人 们 关心 的 是 一 个 过 程 的 一 阶 矩 、 二 阶 矩 特征 , 这 是 比较 容易 得 到 的 
随机 变量 的 ”外 部 ”数字 特征 . 因此， 研究 二 阶 矩 存在 的 随机 变量 是 一 个 重要 的 方向 ， 
通过 深入 分 析 ， 探 知 这 类 随机 变量 有 哪些 共同 的 性 质 . 

首先 ， 我 们 给 出 复 随 机 变量 的 定义 . 设 ( X,Y ) 为 实 随机 变量 , 称 2 = 针 十 认 为 复 
随机 变量 . 其 中 ;= V2-IT. IZ] 全 23=(X+4iY)(ZTY)= X?+Y?. 

对 于 复 r.v. 2 ,有 





EZ EEX+iBY 
如 22 SE(23) 


为 了 对 存在 二 阶 矩 的 随机 变量 的 全 体 进行 统一 考察 ， 我 们 引出 豆 空间 的 概念 . 为 研 
究 这 一 类 随机 变量 提供 数学 框架 与 几何 直观 解释 . 

定义 五 全 {XX :BIX] < oo}, 即 五 是 由 二 阶 矩 存在 的 随机 变量 全 体 构成 的 集合 ， 
称 作 五 空间 . 

五 空间 具有 以 下 良好 性 质 : 

五 空间 是 线性 空间 , 即 : YX1, 2 < 万 ,及 常数 mw € RR,(i 二 1,2), 痢 有 a1X1+Qa2X2 < 
五 成 立 ， 这 是 因为 : 














ElaX1 十 Qa2Xa|? < la EX 十 la EX 十 2laiazs|E|XIX,| 


而 由 Schwartz 不 等 式 BI|X1Xs| < (BE|X1|?. BIX2|?);, 因 Xi,X2€H, 则 EIXi|? < 
oo0, EIX2]? < ,所 DM Blai Xi + asXol < ,Ph orXi+asXs EH. 

在 几何 中 我 们 所 熟悉 的 n 维 欧 几 里 得 空间 是 线性 空间 ， 在 该 空间 中 引进 了 内 积 ， 范 
数 ， 距 离 与 极限 等 概念 ， 受 此 启发 ， 若 能 在 互 空间 中 引入 类 似 的 量 ， 那 么 这 些 量 就 可 以 
赋予 它们 相应 的 几何 意义 ， 从 而 可 借用 几何 的 观点 与 方法 来 刻 划 和 研究 五 空间 的 性 质 . 
不 失 一 般 性 ， 以 下 设 BX = BY = 0. 

VX,Y EH, 定义 (X,Y 了) = (XY). 由 定义 ， 易 知 (X,Y) 满足 以 下 性 质 : 

1。 (和 四 = (证 7) ( 即 (XY) 共 思 反 对 称 ) 

2° (cX,Y)=c(X,Y) 其 中 <。 为 常数 

3° (Xi+ X,Y)= (Xi,Y)+ (X,Y) 其 由 X; € H,(i= 1,2) 

4° (X,X)= EIX|:>0, 有 8 (X,X)=0 人 SX=0 (a.e.) 

我 们 称 (X,Y 了 ) 为 HH 空间 中 X,Y 的 内 积 . 














7.1 ”五 空间 和 均 方 收敛 


若 (X,Y) = 0 (因为 BX = BY =0, 所 以 Cov(X,Y) = 0, 即 X,Y 不 相关 ), 称 耻 与 
Y 正 交 , 记 作 世上 Y. 这样， 对 两 个 7.0.X,Y 不 相关 今 世上, 赋予 了 几何 上 的 直观 意 
义 . 

对 YX <e 互 , 记 | 民 | = (瑟瑟 ) 二 即 | 并 | = (BIXP)3. 显然 五 空间 中 .| 满足 : 

1° ||X||>0, 且 ||X||=0 人 X=0(a.e.) 

2” |leX|| = |c| ||Xll, 其 中 < 为 常数 

3” ||Xi 十 了 2|| < ||Xi| 十 1Xz|| (三 角 不 等 式 ), 其 中 X; € H, (i= 1,2) 

称 ||XI| 为 五 中 钴 的 范 数 . 易 证 : 


EX| < BIX| < |IX|| (7.1.1) 





证 ”由 Jenson 不 等 式 ， 对 是 函数 g(x), 有 g(BX) < EBE(g(z)). 

取 g(z)= |z|, 则 有 1BX|< EIX|. 

由 Schwartz 不 等 式 ， (BE|X|)? < EIX|? .12 之 BIX|<|IXI|. 

所 以 |EX| < EIX| < |||X|| 口 

记 d(X,Y) = |X 一 了 |, 显然 : 

1° dX,Y)>0, 有 8 ax,Y)=0SX=Y (a.e.) 

2°" dX Y= 

3° d(X,2) < d(xX,Y)+da(Y,2) 

称 d(X,Y) 为 HH 中 XX 与 Y 之 间 的 距离 . 

这 样 ， 在 空间 中 定义 了 二 元 素 的 内 积 、 距 离 和 一 元 素 的 范 数 ， 它 们 与 n 维 欧 几 里 
德 空间 中 二 元 素 (向 量 ) 的 内 积 、 距 离 和 一 元 素 的 范 数 相 类 似 . 并 且 ， 在 此 基础 上 ， 可 以 
在 五 空间 中 定义 极限 和 收敛 的 概念 : 

定义 ” 设 {X,X,n>1}cH 

1° 车 lim,_xw d(Xn, X)=0, BT lim x |X X= lm ,x(BIX, XI) = 0, 则 
称 为 序列 {X,n > 1} 的 均 方 极限 , 记 作 





dim Xn 芋 “天 (m.s.: mean square) 


.Ss. 


简 记 linmw_j~ Xn = 二 了 ,或 ,过 对 (一 co)， 

即 ， 序 列 {Xn,n > 1} 均 方 收敛 于 X. 

2。 若 im,wm_jw d(X,Xm) = 0, 则 称 {X,n > 1} 是 柯 西 序列 (Cauchy 序列 ). 

例 ”对 于 BM.{B(),t > 0}),B(0) = 0,V0=to < <to<t= 1, At = 
tr — tri(l SEZn), 令 6 = maxicren At AB: = Blt) — B(tr_1), 则 


0< lim[B(>, A2Bx — 1)’] =lim[B(2_(A’B: — Atx)’] 
导 二 二 238 第 这 于 


0 — Atr]?}+0 
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= lim D3 ty) 


Ts ER 


lim A? Br; 














命题 7.1.1 设 (X,,n>1) 为 五 空间 中 的 Cauchy 序列 , 则 必 存 在 1.v. XX & 五 ,使 得 


ms 


Xn XX 


(此 命题 证 明 要 用 到 测度 论 ， 此 处 从 略 ) 

注 : “这 说 明 互 空间 是 一 个 完备 的 赋 范 线性 空间 . 

命题 7.1.1 给 出 了 均 方 极限 存在 的 一 个 充分 条 件 . 

均 方 极限 具有 与 一 般 极限 相 类 似 的 运算 规则 : 

命题 7.1.2 设 X,X,Y,Y EH, 有 XX, 则 

1° lim,,w BEX, = EX = Elim,w Xn, limn ,ww BIXnl? = EIXP 

2 ,Oh eR 

3° lim jw (GXn t+ BI) = aX+BY, va,P eR. 

证 1° 因 |BX, -BX|< BBX, X|<|X, 一 天 | 则 lian x |BX, -BX|=0, 所 
以 lim、 EX, = EX. 

同 理 ， 由 | -XI 一 XX 可 得 lim, BX = BIX| 

2” 因 


(Xm, Yn) — (X,Y)| 


=|(X, Yn —Y)+ (Xm — X,Y)+ (Xm — X,Y —Y)| 





<|(X, —Y)+ IXm — X,Y)+ IX — X,Y — Y)| 





XI NY — YI + Xn — XI YI + Xm — XY — Yl 





当 nn 一品 时 ， | 一 了 | 一 0, 当 mm 一 xo 时，||X, 一 X|| 一 0, 

也 lim mo |(Xm, Yn) — (X,Y)| =0, Bh lim on sw Xm, Yh) = (X,Y). 

3 ”显然 . 

命题 7.1.3 lin ,~X = XX 的 充 要 条 件 是 :lin ,mj (Xm, 立 ,) = C 存在 且 
此 时 "lim wm3o (Xm Xn) ee 三 省 且 | 全 

证 ”必要 性 由 命题 7.1.2 的 2 ”可 得 ， 下 面 证 明 充分 性 . 

设 jn wo mw (Xm,Xn) 二 C. 先 证 {X,,n > 1} 是 柯 西 序列 . 


这 吉 二 芝 ;| =(Xmn — Kn, Xm — Xn) 239 














人 一 DO 一 CO 


=(Xm, Xm) — (Xm, Xn) — (Xn, Xm) + (Xn, Xn) 一 一 0 
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所 以 {X,n > 1} 是 柯 西 序列 . 由 命题 7.1.1 知 ，3X EH, 有 lim ,x Xn = 三 

命题 7.1.4 若 limn vs 和风 

1” li Xn ee 

2。 lim vsP < zx) = P(X <z) 成 立 , 其 中 ze 是 P(X < zx) 的 连续 点 ，( 即 
XO X(N 000) 

证 ”1° 由 Chebyshev 不 等 式 得 ，Ve > 0,0 < P( -XI>6) < ae 0, 故 
ve >0, lim PR — X| < 2)=1,B 1in, ,~ X, 区 

2。 由 1” 知 ， 只 需 证 明 : 若 linw_,w XX, 则 有 XX(n 一 00). 

设 (x) = P(Xn < 2), F(Z) 二 P(X <z), 设 +z 是 F(z) 的 连续 点 取 Vy<z, 则 





(X <Yy)=(X <Yy, Xn < I)U(X <Yy, Xn > 7) 
C(Xn 和 2Z)U(Xn 一 瑟 | > 和 2 一切 
FY < T(z)+PIX -XI>2—Yy) vn>1 


当 nn 一 %, 取 下 极限 ， 由 概率 收敛 ，F(y) < iim, (7) 十 0. (因为 正 实数 序列 的 
下 极限 总 存在 ， 所 以 lm ,F(z) 存在 ). 
同 理 取 vz > zx, 则 
(Xn < 2)=(Xn < T,X LZZU (Xn < 7z,X > Zz) 
C(X ZZ)U(X-X,|>z— 72) 
SH(z) < F(z)+ P(Xn — XI|>z— 2) vn>1 
当 nn 一 %, 取 上 极限 ， nw F(x) < F(z). 


则 Vy < 2 <z, Fy) < lm ,F(z) < lm jwB(r) < F(z). 


一 -一 一 Do 
令 yTz,zlz, 有 


limF(y)= F(z) limF(z)= F(z) 
yi1z EE 


所 Blin F(z) = lm, ,oR (7) = lm ,F(z) = F(2). 口 





$ 7.2” 均 方 分 析 


在 引出 均 方 极限 之 后 ， 我 们 就 可 以 对 过 程 的 鬼 方 分 析 特 性 展开 深入 的 讨论 . 类似 于 
数学 分 析 中 的 概念 ， 本 节 介 绍 均 方 分 析 (随机 微 积分 ), 即 均 方 连续 性 ， 均 方 可 导 ， 均 方 积 
分 240 
设 {如 ,t > 0} 为 一 随机 过 程 ， 者 Vi > 0,X(t) E 五, 则 称 {X(t),t > 0} 为 二 阶 矩 过 
程 . 
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1 ” 均 方 连续 性 
定义 ” 设 对 二 阶 失 过 程 {X(t),t € T}, 若 对 vto>0 有 1lino 瑟 三- 和 (to), 即 
lint -to | 王 ( 的 一 总 (to 川 = 0 则 称 X(t) 在 to 均 方 连续 . 
XX(#) 对 Vt Ee 工 都 均 方 连续 ， 则 称 { 区 ,te 在 全 上 均 方 连续 . 
例 ” 设 {N(t),t > 0} Poisson 过 程 ， 可 以 证 明 N(t) 在 上 > 0 上 均 方 连续 ， 由 关系 
式 B(N(t+h) 一 W(t))? = (Mh)? +Xh 即 可 立刻 得 到 ， 
又 例如 B.M. ; t),t 0}, 因为 B(B(t 二 hh) 一 B(t))? = |h| 一 0, ( 当 有 有 一 上 0, 所 以 


jin yy B(t) "于 ' B(t0), 即 B(t) 在 t>0 上 均 方 连续 . 
为 了 判别 2 A 除了 利用 定义 ， ee 
定理 7.2.1 记 R(s,t) = B(X(s)-X(t)) = (于 (9 天 芍 ) 则 {X(),t > 0} 在 tb 点 均 方 


连续 的 充 要 条 件 是 R(s,t) 在 (to,to) 点 连续 . 

证 ”由 命题 7.1.3 即 可 得 . 

推论 1 {X(t),te 代 } 在 人 上 均 方 连续 的 充 要 条 件 是 Rs 四 在 {(1,1),t eT} 上 二 

推论 2 车 R(s,t) 在 {(t,t),t Ee 人 T} 上 连续 ， 则 它 在 T x T 上 连续 . 

即 对 协 方差 R(s,1) 而 言 ， 它 在 整个 区 域 荆 x T 上 连续 与 它 在 TxT 工 的 对 角 线 上 连续 
是 等 价 的 . 

证 ”必要 性 显然 ， 只 证 充分 性 . 

由 定理 7.2.1, R(s,t) 在 (t,t),t ET 连续 仿 YVso E T,lim,_,,,X(s) = 对 (s0)， 由 命题 
7.1.3, 有 lims st it (X(s), X(t)) = (X(s0), X(to0)) = R(so,to). 即 R(s,t) - TxT 上 连 
续 . 

2。” 均 方 可 导 ( 微 ) 

定义 ” 称 二 阶 矩 过 程 {X(t),te T} 在 to eT 点 上 均 方 可 导 ， 若 

1 (ot X(to) ms 
h—0 h 
存在 ， 此 时 称 X'(t0) = 忆 |， 与 X'(to)dt 分 别 为 X(t) 在 to 点 的 均 方 导 数 与 均 方 微 
分 . 





X'(to) 


X(t),Yt E 工 均 方 可 导 ， 则 称 {X(t),te T} 在 了 上 是 均 方 可 导 的 .此 时 记 


X(t+h)— X(t) 
h 


lim = X(t) 


六 一 0 


人 9 或 对 (t)) 与 X'(t)dt 分 别称 为 X(t) 在 T 上 的 均 方 导数 与 均 方 微分 . 
下 面 给 | 
定理 7.2.2( 均 方 可 导 准 则 ) {X(t),tE 了} 在 +t 点 均 方 可 导 的 充 要 条 件 是 
R(t+h,ti+))— R(t+h, R(t,t+)) + R(t,t) 


117 
六 一 0,1 一 0 到 .1 


存在 即 要 求 R(s,t) 在 (t,t) 上 广义 二 次 可 微 . 
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证 由 
R(t+h,t+!))— R(t+h,t)— RtiD)+ REt) ,X(t+h)— Xt) X(t+l)— X(t) 
ph:£1 > h 1 ) 
和 命题 7.1.3 可 得 
i A Se A 0) 
nh»0 h ho0,1—»0 h ! 





关于 均 方 可 导 ， 有 以 下 几 个 性 质 : 

定理 7.2.3 若 {X(t),t ET},{Xx(t),t ET}hk=1,2, 在 TT 上 均 方 可 导 ， f(t) 为 一 般 
函数 ， 且 在 了 上 可 导 ， 则 : 

1” XU 在 人 上 均 方 连续 ; 

2” 对 YO1,C2 € ,CiX1(t) 十 CoXo(t) 在 T 上 均 方 可 导 ， 且 


(C1iX1(t) + CX2(t)) = C1X1(t) + Ca X(t); 


3” 昔 (f(DX(D) = XH) + 歧 包 ; 
4° EX'(t)= EFL.; 


$$ 





5° BE(X'(s), X(t)) = R(t) 其 中 R(s,t) = EB(X(s)XH)). 

证 明 1” 由 均 方 可 导 定 义 得 Vio ET,liny,_,o(X(to+h)-X(t0)) =0 一 linmnn o 瑟 (to 十 
hh) = lims_ to 六 (to) 存在 ， 即 X(t) 在 Vto ET 上 均 方 连续 ; 

2” 显 然 ; 


3° 左 = lims _,0 A 


外 = 人 E+ -EW yo 


[X(t+h)— XfFE+A) 


右 = lim( )X(0) + liml 


[f(t+h)— fX0H) 








-J ta 有 
= lim f(t+h)X(t oe — f(t X(t) 二 者 
= 2 


4" 由 命题 7.1.2 可 得 ; 
5 ”由 命题 7.1.2 可 得 . 


3” 均 方 积 分 

定义 ” 设 {X(),teE 人 了} 为 二 阶 矩 过 程 ，f(#),te 了 为 定义 在 上 的 函数 ，[a,9] C7， 
任 取 分 点 a=to<ti<ty < <ty=b,Atr = 不-1 令 入 = maxicrcn Ar. 任 取 
uo € [tr_1,tx], 若 


n b 
Ef) X(t | OX 


均 方 极限 存在 ， 则 称 [9 f(t)X(t) dt 为 f(t)X(t) 在 [a, 四 上 的 R- 均 方 积分 . 
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车 ln ovs 放 FX) dt 全 六 7)dt 均 方 极限 存在 ， 则 称 上 述 极限 为 
f(t)X(t) 在 (-x, 十 %) 上 的 R- 均 方 积分 . 

均 方 可 积 的 判定 定理 如 下 : 

定理 7.2.4( 充 分 条 件 ) 若 [7 /9 f(s)fF(0)R(s,t) dsdt ee . 族 了 (t)X(t) dt 存在 . 

证 ”由 命题 7.1.3 可 知 ， f(t)X 0 中 上 均 方 可 积 ， 


b 
| / f(DX(O dt = lim > flur) KX (ur) At 


存在 的 充 要 条 件 是 : 
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lim E{| Dox (ux ) Atx] D, f(u)X(u) At]} (+*) 


i=1 


存在 ， 根 据 期 望 的 性 质 : 有 限 个 1.v. 线性 组 合 的 期 望 等 于 各 +.v. 的 期 望 的 线性 组 合 ， 则 


"=k 3 un) fu) IE(X (un) E(u)]Atr At)} 


=11=1 





= lm [DD > Fl)f(u) Rlun, Ww)At A 
三 1 4=1 


所 以 当 9 f(s)f(H)R(s,t) ds dt 存在 时 ，(+) 存在 ， 所 以 /f(t)X 

推论 /+X f(t)X(t) dt 存在 的 充分 条 件 是 二 重 积分 三 > [+X f(s)f(2)R(s,t) dsdt 
存在 . 

下 面 我 们 来 讨 ; 0 

定理 7.2.5 设 f(t) 对 (1), 反 (tjXr(t) (==1,2) 在 [a 四 上 均 方 可 积 ， 则 

1° Ef ft) Ne PFE EX(t) dt 


at f(x X(s) ds) TE f(t) X(t) dt)] = [fs R(s,t) ds dt 


2°。 YO EE R,k=1,2, 有 人 DR Crfr(t) Xr(t) dt = Di i Cx fxr(t)Xr(t) dt (线性 

es 
. ft 的 dt 二 FHKE d= FEXG) dt veel[a,d) 

Se Fubini 定理 易 得 ; 2”， 3 与 数学 分 析 中 的 证 明 相 类 似 . 

-os 我 们 可 以 得 到 均 方 连续 与 均 方 积分 的 关系 . 

定理 7.2.6 设 和 (在 [上 均 方 连续 ， 则 

1。 X(t) 在 [a, 相 均 方 可 积 ， 即 /*(t) dt 存在 ; 

2° Xz fo lx) ds:; i 

3°。 记 了 Y(#) 会 放 X(w) dw (te<t< 引 则 他 (> 0} 在 [如 上 均 方 连续 ， 均 方 可 
导 , 且 Y'(t) = X(t). 


72 ， 均 方 分 析 


证 1 ”由 定理 7.2.1 及 其 推论 知 ，X(t) 在 [a, 引 均 方 连 续 会 Rs 蚊 在 了 x 了 上 连 
续 二 户 庆 Rsbdsdt 存在 . 由 定理 7.1.4 得 X( 在 [4, 相 均 方 可 积 . 
oo 因为 ||X(D)| = (X(t), X(t))3 = [B(X(t) X(t) = 
,由 定理 7.1 得 ||XX(j| 连续 ， 从 而 |X(s)|ds 存在 ， 因 为 


b n 
x0 = xan = pl Xtal 


| Dx Aatl < > IX (Cu)llAt (距离 不 等 式 ) 
k=1 k=1 














所 以 | [XG dt < lin ,oD XNAts = 1 XN at. 
3 ”由 条 件 得 Y(t) 在 [4,9] 上 均 方 连续 显然 ， 只 需 再 证 Y(t) 均 方 可 导 : 


Y(t+h)— Y(t) 本 
ee JE X(u du—X x@l= (X(s)— X(t)) dsl| 
t 
由 2° 


1 At 1 pttn 
i Ga- x)alsi/ lx) -xOllas 
Lt 


< mas, |X(s) — XO 0 
所 以 lin oO = X(t), 即 了 Y(t) 在 [a,j 均 方 可 导 ， 且 Y(t) = X(t). 口 


推论 设 和 OH 在 [a 0 职 ， 且 X(t) 在 [a, 相 上 均 方 连续 ， 则 
二 网 三 二 二 ra a 


证 因 X(t)= 让 X s)ds, X(a) = fo X'(s)ds, 则 
a t 
i xu-/ xd= | KX’'(s)ds 


例 ”B.M. {B(1),t > 0} 按 定 义 对 Vw < Q, 它 是 上 的 连续 函数 ， 因 此 第 五 章 中 定义 的 
B.M. 的 积分 S(t) = [Blw)du 对 每 一 个 we 9 都 有 定义 的 . 且 {S(t),t > 0} 仍 是 正 态 过 
程 . 另 一 方面 , 前 面 已 说 明 {B(t),t > 0} 均 方 连续 , 故 它 均 方 可 积 , 记 为 Y(t) = 此 了 (du 
由 均 方 收敛 唯一 性 得 ， S(t) = Y(t),a.e. 且 {Y(t),t > 0] 仍 是 正 态 过 程 ， 均 方 连续 ， 其 均 
方 导 数 亦 为 B(#). 














244 


$ 7.3 伊 芯 (745) 随机 积分 


第 七 章 ”随机 微分 方程 


本 节 引 入 伊 芯 积 分 的 确切 定义 ， 并 分 析 它 的 主要 性 质 ， 特 别 是 1t6 公式. 
在 ”布朗 运动 ”一 章 中 ， 我 们 已 初步 认识 到 由 质点 在 直线 上 作 随 机 游 动 引入 的 随机 
微分 方程 ， 为 此 我 们 要 研究 形式 如 下 的 积分 


人 
[ g(t,w) dB(t,w) 


不 难 发 现 ， 这 是 g(t,w) 关于 B(t,w) 的 R-S 均 方 积分 . 我 们 已 经 知道 ，B.M. 的 轨道 
性 质 很 特殊 ， 即 几乎 任 一 条 轨道 的 任 一 点 都 没有 有 限 的 导数 ， 任 意 两 点 之 间 也 没有 有 限 
的 变 差 . 因此 我 们 必须 对 关于 B(t,w) 的 R-S 积分 给 出 与 这 些 性 质 相对 应 的 定义 . 

在 这 一 节 中 ， 就 是 要 对 这 一 形式 的 积分 给 予 确切 的 数学 定义 ， 在 此 基础 上 再 研究 其 
重要 性 质 . 

设 标准 B.M. {B(t),t > 0} 是 定义 在 概率 空间 ( 0, 入.P ) 上 的 随机 过 程 . 

设 (五 ,# > 0) 是 一 族 单调 递增 的 和 的 子 -cc 域 , 即 FC ,CF (YH < th)， 
YH 是 三 的 子 -cc 域 , 且 对 Y0 < s < t,B(t) 关于 大 可 测 ， E(B(t)|F) = B(s), 
E(B(t) — B(s)|F,) = 

假设 7.3.1 设 随机 过 程 {g(i,w),t > 0} 满足 以 下 条 件 ,， 对 了 > 0 

1” g(t,w) 关于 [0, 了 T] x 9 可 测 

2” Vt > 0,g(t,:) 关于 五 可 浏 ， 即 VYw € R,(w:g(t,w)<r)ef 

3° fo E(g(t,w))?dt < %, E(g(t,w)? < ,vt>0 

满足 假设 7.3.1 的 函数 全 体 记 作 [3. 

附注 ”关于 ”可 测 ” 的 一 点 说 明 

在 第 一 章 中 ， 已 经 提 到 了 可 测 空间 (9, 大) 与 概率 空间 (9,, 了) 的 概念 ， 对 于 某 一 
特定 的 概率 空间 (Q, ,了 P), 要 求 随机 变量 X 是 从 (8, 开 ) 到 (有 RR,B) ( 8 是 定义 在 RR 上 
的 Borel 集 ) 是 可 测 函数 (或 可 测 映射 ), 其 一 个 主要 目的 是 使 对 于 YB € B, (w : X(w) E 
B)E 研 成立. 这 样 就 使 得 在 (Q, 下 ,P) 中 事件 (w :XX(w) e B) 可 以 定义 其 概率 (测度 ), 即 
P(w:X(w) E B) 有 意义 . 

在 1t6 积 分 中 , 可 测 性 同样 具有 重要 的 前 提 意 义 . 首先 , 对 于 给 定 的 概率 空间 (9, ,PP)， 
二 元 函数 {g(t,w),0 < t < T} 关于 可 测 空 间 ([0, 了 x 9,8[0,T] x 大 ) 可 测 ， 是 使 得 积 
分 fg g(t,w) dB(t,w) 有 意义 的 基础 ， 同 时 对 于 给 定 的 全， ns g(t,w) dB(t,w) 也 是 关于 
(9Q, 天 ) 可 测 的 ， 即 概率 测度 Plw : /7 g(t,w)dB(t,w) < z) 是 有 意义 的 . 从 而 对 于 变化 的 
(ea a fs g(s,ww) dB(s,w) 构成 一 个 随机 过 程 . 其 次 ,对 V0 <t<7T,g(t,:) 关 于 五 可 
测 ( 即 Vz € R,(w : g(t,w) < x) € 琴 ) 使 得 B(g(t)| 厂 ) = g(t) 成 立正 是 这 个 事实 ， 赋予 
了 It6 积分 许多 重要 而 简洁 的 性 质 . 以 下 的 有 答 ， 际 不断 谢 呈 这 - 点 . 

定义 。” 设 (B(t),t > 0) 为 标准 B.M., {g(t,w),t > 0} 满足 假设 7.3.1, 即 9 E 好， 
[0,# CI0,T]. 任 取 VY0O<to<ti<to < <t<t 令 Ati =ti -trl (1 <k<n), 
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入 三 Inaxl<k<n Aty. 若 
ED sD)B) 一 BrD) 1400) US 


均 方 极限 存在 . 则 称 Ig(t) = 局 g(s,w)dB(s,w) 为 {g(t,w),t > 0} 关于 {B(t),t> 0} 在 
[0, 引 的 I#6 积分 . 

注意 It6 积分 的 定义 中 ， 求 极限 项 中 g(t) 取 的 是 左 端点 .一 般 地 取 其 他 端点 会 导 
致 极限 值 不 同 ， 其 至 不 存在 . 

例 ”B.M. 的 罗 道 性 质 表明 


no Be) 二 ~ Bt) 一 


: " m.s. 1 t 
Ey DD BEB) ~ Bs) = 55°() + 3 


为 了 研究 It6 积分 的 性 质 ， 我 们 从 简单 入 手 . 设 {g(t,w),t > 0} 是 [0,4] 上 的 台 
阶 形 函 数 ( 即 g(t,w) 是 示 性 函数 的 线性 组 合 ， 又 称 为 简单 函数 ).， 则 对 0= to << 
"<tn=1, 有 g(t) 一 Dy gr—1(w) Tes_1<t<t)(t), (gr-1(w) 关于 er 可 测 ). 不 妨 设 
Fi=0o(B(s),0 Ls Lt)=0Bt), 1 SEEnt tn 1), Ng(t,w) 于 Bt) 的 It6 积 
分 为 ， 

1(g) = 》 gi((B(ti) -Bi) 
k=1 


因此 


BI(g) = > Blor-1(B(tr)— Blts-1))] = > Blor-1: E(B(ti)— B(tr_1)|B(ts-1)] =0 
天 二 站 二 二 


BID) = DI(g) = >》 B(g?_1B[(B(tr) — B(ti_1)) |B(tr-1))) 
= 


n t 
= Bo th ty) = f Bsrls) ds 


开 = 诗 0 





对 于 简单 函数 的 1t6 积分 ， 我 们 还 可 以 很 简便 地 得 到 下 面 的 性 质 . 若 oi € R, gi(i = 
1,2) 都 是 满足 上 述 条 件 的 简单 函数 ， 则 有 





IT(a191+ 292) = a1T(g1) + Qa2T(g2) (线性 关系 ) 
若 记 S(t) = ig(s)dB(s) (其 中 98486 为 台阶 形 函 数 ), 则 vti < t2, 容易 验证 


B(S(ts) — S(t)|B(t1)) =0 
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即 EB(S(t2)|B(t1)) = EB(S(t1)|B(t1)) = S(t1), 这 就 意味 着 ， S(t) = 万 g(s)dB(s) 关于 
{B(t),t > 0} 是 蒜 . 
另外 ， I(g) 的 可 加 性 质 也 很 显然 ， 记 (0,t) = 广 g(s)dB(9), 则 


Ts(0,t)= Ig(0,t1) + Ig(ty,t) VO<ti<t 


一 般 地 ， 对 vg(t) E 好, I(t) 会 Jy(0,) 会 1g(s) dB(s)， 由 概率 论 随 机 变量 分 解 可 
知 ， 存 在 {gn(),n > 1}, gn(t) E L7 为 台阶 形 函 数 (简单 函数 ), 当 n1 时 {gw(),t> 1 是 
单调 不 减 序列 ， 且 gn(t) 19(t), 故 由 Lebessue Dominated Convergence Theorem( 勒 贝 格 控 
制 收敛 定理 ) 知 


t 
Ly ee Li gn(s) dB(s)= lim J,(t) 
0 no00 


n=0 


因此 ,由 五, (区 的 性 质 ， 可 以 推广 到 对 一 般 满足 假设 7.3.1 条 件 的 It6 积分 有 如 下 的 
性 质 : 

vg, 91,92 € £3, 记 万 (区 三 五 (0, 汪 

1° EL(t)=0 (7.3.2) 

2° E(t)= ff Eg’(s)ds, (1(s), T(t)) = fo Bg’(u) du. (YO < s <1) (7.3.3) 

3° Iagog(t) = oy (t) + oaly,(t) (Yar as ER) (7.3.4) 

4° TOF)=7(0,t) + T(t).(V0 ZH (7.3.5) 

5° {Ly(t) = 局 g(s)dB(s),t > 0} 关于 是 团 

6。 (Doob 极 大 值 不 等 式 ) 令 X(t) = fg(s)dB(s), 则 Ww>0,X3>0,p>1 





Pl wax, )| > A)< 


P(XH)Y 
Ou 入 了 


(7.3.6) 


8 t 
Ws h(n) =a g(u) dB(u "0 g(v) dB(v)] 
站 fs (wjg(v) E(dB(u) dB(v)) (Fubini 定理 ) 


因为 当 " 地 “ 时， 总 能 取 和 式 中 积分 小 区 间 不 重 三 ， 则 由 B.M. 性 质 有 





E(dB(u) dB(v)) =0 


只 有 当 w = w 时 ， 才 可 得 到 B(dB(w)dB(v)) = du = dv. 所 以 上 面 的 二 重 积分 ， 相 
当 于 对 角 线 上 的 积分 ， 即 (1(s), 1y(t)) = fo Bg? ( 芒 d 其 他 证 明 很 简单 ， 此 处 略 去 . 
注 ”性 质 5° 说 明了 由 It6 积分 定义 的 过 程 一 定 是 巩 . 事实 上 ， 其 道 命题 也 成 立 ， 
即 : 


7.4 It6 随机 过 程 与 116 公式 


若 {X(t),t > 0} 是 著 ， 针 (t) € L3, 则 必 存 在 唯一 的 自 适应 过 程 {g(t),t > 0} ( 即 





X(t) — X(to) | g(s) dB(s) 


这 就 是 著名 的 蒜 表 示 定 理 . 

例 求 记 Bls)dB(s) ( 设 B(0)=0) 

求解 可 以 根据 定义 完成 : 显然 B(t) € CE,Y0 三 可 < 在 < 区 二 三 让 At 三 不 一 不 -1 
令 入 = maxicp<n At 记 Bi = B(ti), AB; = B(ti) — B(tr-1), 


A(B?)= Bi — Bi_1 =(B: — Bn_1)? +2Br_i(B; — Br-i1) 
=(AB;)? + 2B:_1AB; 


所 以 BY(t) = D1 A(BE) = D(ABr) +2 D1 Br-1ABr, BN Dis Bltr-1)ABr = 
$B°(t) I 3 (AB). 
在 第 五 章 中 ， 我 们 已 知 B.M. 的 轨道 性 质 


nn nn 


E(S (AB)’ —t) = E(S IAB)? 一 At 0 (一 0) 


下 所 二 k=1 














即 D2_1(ABi)? 号 t (和 一 0), 所 以 
+t n 
/ B(s) dB(s) = 0 — Blti-1)) 荆 - 了 Ba() 一 3 


同 理 ， 还 可 以 得 到 [* B(s) dB(s) = #(B?(b) ~ B2(a)) 一 3 一 ad 
$ 7.4 1t6 随机 过 程 与 716 公式 


上 一 节 定 义 了 It6 积分 的 概念 ， 但 是 它 应 该 怎么 计算 呢 ? 通常 用 It6 积分 的 定义 直 
接 计 算是 相当 困难 的 .为 此 ， 在 本 书 中 ， 介 绍 It6 积分 的 一 个 重要 法 则 一 - It6 公式 . 它 
可 以 看 作 是 与 通常 微 积分 中 的 复合 函数 求 微 分 相对 应 的 法 则 ， 但 It6 公式 与 通常 的 复合 
函数 求 导 法 则 在 形式 上 有 很 大 不 同 . 

定义 ” 设 随机 过 程 = {X(t),t > 0}, 满足 如 下 的 I 二 积分 : V0<to<t< 人 TT 





t 让 
xO-xto= 人 xds+ 上/ o(s) dB(s) (7.4.1) 
to to 
或 等 价 地 写作 745 微分 形式 248 


dX(t) = b(t) dt + olt) dB(t) (7.4.2) 
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其 中 |5(t)|3,o(t) € C3 ( 即 满足 假设 7.2.1), 则 称 为 716 随机 过 程 (简称 7t6 过程 ) 

在 116 随机 过 程 的 定义 式 7.4.1 中 ， 太 5(s) ds 是 一 般 的 均 方 积分 ， 而 /0o(s) dB(s) 
则 是 It6 积 

本 节 中 所 讨论 的 问题 就 是 : 若 一 随机 过 程 Y = {Y(t),t > 0} 是 Ti5 过程 XX 的 函数 ， 
如 何 求 它 的 微分 dY(t)? Y(t) 是 否 可 以 表示 为 Tt5 积分 ? 如 果 可 以 , 则 又 需要 哪些 条 件 ? 
下 面 介 绍 的 1t6 公式 就 是 回答 这 些 问题 的 . 

定理 7.41 设立 ={ 开 人 0] 满足 等 式 (7.4.1), y = f(t,z) 是 二 元 函数 ， 且 具有 
连续 偏 导 数 让 ,时 3 令 了 (全 At KGD), 则 过 程 Y = {Y(t),t > 0} 也 是 随机 过 程 ， 
且 对 VY0<to<t< 人 TT 满足 如 下 的 1t6 积分 方程 : 


1 0 0 0? 
YO -rto)= fF 于 > 元 Xl(s yat = X(s)) dB(s). (7.4.3) 





或 等 价 的 It6 微分 形式 
Of Of a 0f 
dY(t) = ( 革 十 /7 十 全 二 3 ~)(t, X(t)) dt 十 orgs tt X(t)) 4 人 (a.e.) (7.4.4) 






(7.4.3) 或 (7.4.4) 即 是 1t6 公式 . 

It6 公式 有 非常 广 0 Ns 

例 1 用 474 公式 求 凡 Bls)dB(5) 

令 X(t) = B(t), 则 和 =0.dt+1. dB(t), 令 f(t,2)= $2, Y(t) = $f(t, B(t)) = 
3B?(#). 所 以 5=0,o=1, 名 =0, 六 =z,24=1. 则 


Bf Of ,Of 0o? 
dyY 的 90 PU + [a 


B() dB 人 二 +0+0+3)d 











O02f 
Ox? 





dt 


即 d(3#B2(t)) = B(t)dB(t) 十 于 dt 写成 积分 形式 为 /5 d(43B?(s)) = J B(s)dB(s) 二 
3 ds. 于 是 得 J; B(s) dB(s) = 4#B?(t)—$. 

将 例 1 与 上 一 节 利用 It6 积分 定义 求 内 B(s) dB(s) 可 发 现 ， 1t6 公式 为 我 们 提供 了 
一 个 更 简捷 的 工具 . 

例 2 人 口 增长 模型 : 设 N(t) 为 t 时 刻 的 人 口 数 ， 且 {N(t),t > 0} 满足 














dN(t) =yN(t) dt + aN(t) dB(t) 


其 中 ,a 为 常数 . 
令 B(0) = 0， 人 =+taBt). S ft,r) = no, Yt) = mN(D), 则 名 =0, 


范 = 纪 天 = 一 点 .由 (7.44 式 有 : 
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1 2N2(t 
dY(t) = dinN(= PNG Wi +01 ld + He 人 页 dB 


7.4 It6 随机 过 程 与 1t6 公式 


即 : 
oa? 
9 


d(InN(t))= (7——)dt+i+adB(t) 


当 B(0) = 0 时 ， 得 





所 以 
N(t) os N(0)e0 -和 .eaB(b 
可 见 N(t) 是 几何 B.M. 的 变形 . 
讨论 : 当 Dy > oa? 时 ，t 一 o0, 则 N(t) 2 十 oo 
当 27 <o? 时 ， t 一 co， 则 N(t) $0 
当 2y = oa? 时 ，N(t) = N(0)e®B() 随机 波动 
EN(t) = EIN(0)e0 -所 } 2 es3(9)] =N(0)e0 -St pe Bt) 


、 -et i 让 1 二 
=N(0)e’' 3 e e 3 dz 
O08 





V2Tt 
1 Cr 三” sex- 蝇 ) 
= NI0)je 7 el 27) dz 


附 ”76 公式 证 明 . 这 里 只 给 出 简要 梗概 ， 详 细 证 明 参见 参考 书 [2]. 
引 理 : 设 y = f(t,z) 是 [0, 如 xx 已 一 忆 的 二 元 函数 ， 它 有 连续 的 偏 导数 半 ， 红 ， 2， 
则 对 Vv[t,t 十 人 4 CC [0,T, (z,z 十 Az)€ R. 存在 常数 0<a,B <1, 满 足 


tt 


f(t 4 At,z + Ar)— f(t,r) = Sf 十 aAt z)At+ DA 
站 共 


2Z 十 BAz) (Az)? 


Oz? 
( 即 微分 中 值 定理 ) 
记 AX(t) = X(t 二 At) 一 X(t), 于 是 


AY(t) =f(t+ At, X(t+ At)) — f(t, X(t)) 


of 10°f 


= (ttt XO) At+ F(t XO)AX() + FF X(t) + BAX(E)) AX)) 
a 2 O72 


由 区, 外 ,25f 连续 ， dX(t) = o(t) 8804t) 十 5(t) dt, 即 


AX(t) — (BAt + olt)AB(t)) "2 o(At) 
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所 以 
8 
本 X(t))(At + oAt)) 
也" ET. a(t)AB() + BEAt + ol At)) 
ms 7 Sa 1) Xt Ar 4 olAt) 
Oz Oz 
oe a 过 exeslO(AB(bj 上 BCsj(Ab2+ac(DABGMOAE+olAbj 
Se 
rr (OAt+ o(At) 
故 : 
ns Ss tt, 让 0 0 2 0? 
AY(O old) ) up ( 字 H+ | 字 f(t XH))At + ol At) 
所 以 


dY(t) = (0) x(t) dB() | (到 | WL + | f(t, X(t)) dt. 
将 上 述 It6 积分 ， 推 广 到 向 量 空 间 ， 可 得 向 量 1t6 积分 . 
令 B(t) = (Bi(t),… ,Bm(t))? 是 m 维 标准 B.M., 即 {B(t),t > 0} 满足 : 
1” B(t) 是 m 维 独立 增 量 过 程 
2° Vs,t>0,B(s+t) 一 B(s) ~ N(0,t7). 其 中 了 为 m 维 单位 矩阵 ， 即 它 的 p.d.f. 为 
f(t we 入 (t,2) E [0,#] x RR. 其 中 z= (81 ,rm) € RY, r= Dr?. 
设 W0) = (Da 人 9 




















ou1(t) “OIm (#) 
3(t) = (0i;(t)) = . 
oni(t) 1 onm(t) 
且 人 区 2 oij(t) € L3,Y1 <i<n,1<j<m 且 是 环 可 测 的 . 其 中 环 = 
o( Bi(si), si < t, 1 < ? < m). 车 {X(t) 一 (X1(t),: Nh ,Xn(t))T,t 之 0} 满足 


dX1(t) 二 D1(t) dt 十 011(t) dBi(t) 十 0o12(t) dB>(t) 十 … 十 O11m (t) dBn,(t) 
dX2(t) = b(t) dt + 021(t) dB1(t) + 022(t) dB2(t) + :+ 02m(t) dBrm(t) 


dXn(t) 一 bn(t) dt * on1(t) dBi(t) 二 on2(t) dB2(t) 下 we onm(t) dB lt) (7.4.5) 


或 写成 向 基 形 式 
dX(t) = b(t) dt + dB (7.4.6) 


称 革 = {X(t),t> 0} 为 n 维 It6 随机 过 程 . 
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定理 7.4.2( 多 元 It6 公式 ) 设 {X(t),t>0} 是 nn 维 1t6 过程 , 满足 dX(t) = b(t) dt 十 
Dt) dB f(t 2) = (f(t 2) a(t 7) 7 是 [0,x) x R" 一 Re 上 的 函数 . 其 中 = 
(z1,… 且 a op 偏 导数 连续 . 1 < k < d, 1 < i,j < n， 则 随机 过 程 
{Y(#) = f(t, 关 (四 ),t>0} 是 4 维 It6 随机 过 程 ， 且 





Rn mm 


的 三 2 人 二 DO) dt 


ts Tl 





mm nn 


+ Dt dBi(t),1 <h<d (7.4.7) 
三 31 
证 ”多 元 1t6 公式 的 证 明 类 似 于 一 维 1t6 公式 的 证 明 ， 故 此 处 从 略 . 
例 0 


设 X(t) = (Xilt )) 满足 
{ da () ,) | bi(t) J. mm | hlt) 0 ) | dBi(t) ) 
dXa(t) ba(t) 0 ba(t) dBa(t) 
令 f(t,7) = zi zo, Y(t) = Xilt ), 则 
dy = (bi(t) Xa(t) + ba(t) XI)) dt + bi(t) Xalt) dBi(t) + ba(t)X1(t) dB2lt) (7.4.8) 


§ 7.5 ”1t6 随机 微分 方程 (Tt6 Stochastic Differentied Equations) 


前 面 在 It6 公式 中 我 们 接触 了 随机 微分 方程 ， 那 么 ， 给 定 一 个 随机 微分 方程 ， 它 的 
解 是 否 存 在 ? 如 果 存 在 ， 是 否 唯 一 ? 有 什么 性 质 ? 因此 如 何 求解 一 个 随机 微分 方程 成 为 
解答 这 些 问 题 的 基础 ， 这 一 节 中 ， 我 们 先 着 手 讨 论 一 些 简 单 随机 微分 方程 的 求解 方法 . 
1. 常 系数 的 线性 随机 微分 方程 

例 1 设 {X(t),t>0} 满足 Ornstein-Uhlenbeck 方程 


dX(t) = —uX(t)dt+odB(t) (4.0 为 常数 ) (7.5.1) 


求解 X(t) 
解 : 将 方程 化 为 4X(t) + 1X(t) dt = odB(t) 
两 边 同 乘 上 et, 即 
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ept( dX(t) + X(t) dt) = cet dB(t) 


d(X(t)er!) = aekt dB(t) 
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两 边 从 to 到 上 积分 ，(Y0<to<t<7)i, 有 


二 
X(t)ert — X(to)ert? = / oer* dB(s) 


to 


t 
X(t) = X(to)e- (tto) + 1/ oe-Mlt™7*) dB(s) (7.5.2) 


to 


2. 简单 的 线性 齐 次 随机 微分 方程 


例 2 人 口 增长 模型 ( 见 上 节 例 2) 
用 116 公式 求解 积分 /+ 号 中 ,得 


N(t) = N(0)e0 -ttaB) (7.5.3) 
例 3 Black-Scholes model 


设 S(t) 为 上 时 刻 某 种 股票 (证 券 ) 价格 ， 在 某 些 条 件 下 它 满足 以 下 随机 微分 方程 : 


| dS(t) = S(t)(ndt 二 dB ee 


S(0) = 50 其 中 ,0o 为 常数 
该 模型 与 上 例 人 口 模型 类 似 ， 用 相同 方法 即 可 求 得 
S(t) = Soe(- 写 jwB( (7.5.5) 


是 它 的 解 ， 它 也 是 一 个 几何 B.M. 过 程 . 


3. 一 般 的 线性 非 齐 次 随机 微分 方程 


设 {X(4),t > 0} 满足 


| dX(t) = (a(t)X(t) + aa(t)) dt + (Di(t)X(t) + b(t)) dB(t) (7.5.6) 


X(to)=2 (初始 条 件 ) 
其 中 {B(t),t > 0} 是 一 维 标准 B.M., a1(t), a2(t), 了 1(t),52(t) 是 t 的 一 般 函 数 (也 可 以 


是 常数 ). 设 它们 在 [0,4] 上 Borel 可 测 1 且 有 界 ， 设 0<to<t<TT, 初始 值 和 (加 ) 关于 
万 ,可 测 ， 
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! 容 易 验 证 ， 单 调 函 数 ， 逐 段 单调 函数 及 连续 函数 均 是 Borel 可 测 函 数 


It6 随机 微分 方程 
b(t) == 0, 则 称 方程 


我 们 由 易 入 难 地 着 手 . 在 (7.4.6) 中 着 a2(t) 三 


7.5 
dX(t) = a(t) X(t) dt + b(t) (7.5.7) 


X(t) dB(t) 


为 齐 次 线性 随机 微分 方程 . 
在 (7.4.6) 中 若 b(t) = 0, 则 称 方程 
dX(t) = (a1(t)X(t) + a2(t)) dt + b(t) dB(t) (7.5.8) 


为 狭义 下 的 线性 随机 微分 方程 . 考虑 狭义 SDE 的 解法 
先 求解 (7.5.8) 对 应 的 齐 次 方程 ， 即 
dX(t) = a(t)X(t) dt 


亦 即 全 (2 = oa(t) dt 
上 式 中 变量 已 经 分 离 ， 两 边 从 to 到 + 积分 (V0 < to < t+ < 7), 可 得 到 它 的 一 个 解 为 





u) du) 


piolt) = ezp( 1 ail 
(2) 求解 (7.5.8) 所 示 狭 义 SDE 
y= f(t 2) = pat)z, 则 部 = pil (alt), A = pi), Ht = 
A er 
式 有 


令 y=， 

对 于 X(t) 所 满足 的 (7.4.8) 式 有 人 全 十 ua 人 )， 
8 入 十 (的 dd 五 的 . 令 Y(t, XH)) = pil ), 于 是 利用 It6 公 
dY(t, X(t)) =d(pr, (t)X(t)) 
=ba(t)pr, (t) dB 
(t)pr (t) dt + ba(t)pr, (t 


+ [pi (tjai(t) X(t) + (ou(t) X(t) + a2(t))pr, (t)] dt 
注意 到 pi, (to) = 1, 对 上 式 两 


所 以 d(pi1(t)X(#)) = 


边 积 分 ， 有 
paOXOO= Xt) + 人 aerods+ 人 PopmatodBO 
)ds+ J bz(s)pr1(s)dB(s)] 是 方程 (7.5.8) 的 


)pio 1(s) 


(tIX( (to) 十 ao2(S 
(7.4.8) 即 转化 为 Langevin 方 


所 以 X(t) = pt, lt 
一 个 解 . 
三 一 ‰ a2(t) b(t) = 0, bolt 


—adt+bdB(t) 


t) 二 4 时 ， 


程 
dX(t)= 


由 上 述 求 解 过 程 得 到 的 解 与 前 面 的 结 蟒 完全 一 至 
现在 ， 我 们 来 解 一 般 的 线性 SDE, 仍然 从 它 相 对 应 的 齐 次 SDE 开始 


(1) 求解 齐 次 SDE(7.5.7) 


第 七 章 ”随机 微分 方程 


令 y(t) = Inz, 即 2 = 0， a 二 i, 2 三 古 . 令 了 Y(t) = imX(t), 对 方程 (7.5.7) 利用 





1 yy 2 





dy 的 = dinX(t) = [a(t)X(#). i 3 jn) dt 二 b(t)X(). Ri 0 
所 以 
dlnX(t) = [a1(t) — 3D] dt + h(t) aB(t) 
两 边 积分 
t t 
4 / (G1(0) — sydst / i 
to 一 to 


不 妨 取 革 (to) = 1 (作为 特 解 ), 则 inX(to) = 0, 所 以 


, t 
a / bi(s) dB(s) 
to 





t 
inX(t) = 1 (al(s) 一 
to 


故 取 


8). mer 
pts lt) = carl | (ai(s) 一 2 Lr +/ bi(s) dB(s)] (7.5.10) 


D 





作为 方程 (7.4.7) 的 一 个 基本 解 ， 即 它 满足 
dp (t) = a(t)pr (t) dt + bi(t)pr, (t) dB(t) (7.5.10.a) 


(2) 求解 一 般 线性 SDE(7.5.6) 
先 利用 上 一 节 中 定理 7.3.2 给 出 一 个 特殊 的 多 元 1t6 公式 ， 设 {Xi(t),t > 0}, i = 1,2， 
满足 
dXi(t) = bi(t) dt + oi(t) dB(t) [= 
令 f(t, 21, 72) = 1 12, Y(t) = Xi(t) X(t), 刚 


d(X1(t)X2(t)) =(01(t)X2(t) + 02(t)X1(t)) dB(t) 
+ (Di(t)X2(t) + ba(t) X(t) + oi(t)oa(t)) dt (7.5.11) 


对 于 一 般 线 性 SDE(7.5.6), 设 (X(t),t > 0) 满足 (7.5.6), 令 了 Y(t) = pi (t)X(4), 其 中 
piolt) 由 等 式 (7.5.10) 定义 ， 即 





dpto(t) = ai(t)pro(t) dt + bi(t)pro (t) dB(t) 
令 f(z)=4 则 部 =0, 如 = 五, 塑 志高: 由 116 公式 可 得 


T 


1 : 
dprs (t) = [0 ~ alt)prolt)pro (t) + 3b1(t)pr (t)2pi (tdt + bi(t)pro(t)(—pro (#)) 4B(t) 
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所 以 


(7.5.12) 
dX(t) = (a1(t)X(t) + a2(t)) dt + (Di(t)X(t) + 02(t)) dB(t) 


| dpr, (t) = pe (t)(—ai(t) + b3(t)) dt — bi(t)pr, (t) dB(t) 
由 (7.5.12) 与 (7.5.11), 可 知 
dpr (t) X(t) =[(aa(t) XH) + aa(t) pr (t+ (~a(t) + Pilt)pr (t) Xt) 
+(bi(t) X(t) + bo(t))(—bi(t) pr (t))] dt 
+[—Dbi(t)pr (HX(t) + b(t) X(t) + bo(t) pr (t)] dB(t) 


得 
d(pr, (t)X(t)) = (a2(t) — Pi(t)ba(t))pr (t) dt + balt)pr, (t) dB(t) 
t t 
pi (t) X(t) = X(to) + 1/ [a2(s) — bi(s)ba(s)]pr, (s) ds +/ ba(s)pr, (s) dB(s) 
to to 
故 


XO = pa OR) + { aal) = haba(s)pr (sds + f tats) dB 7533 


是 方程 (7.5.6) 的 解 ， 其 中 pi,(t) 由 (7.5.10) 定义 ， 它 是 方程 (7.5.7) 的 一 个 基本 解 . 
例 4 设 {X(t),t>0} 满足 以 下 1t6 方程 


2 


1+t 
则 对 应 的 齐 次 线性 方程 的 基本 解 为 pt,(t) = ezp( 户 起 5 dw) = (如 二 72 所 以 (7.5.14) 
的 一 般 解 为 
1+t 


KG) =( 计 PK(to) 人 bl114 (ds bl 2 二 dB 





dX(t)=( (十 5D(1 十 妨 这 ) dt 十 5(1 十 t+)?dB(t) (5 > 0 为 常数 ) (7.5.14) 








1+t. : 

=( 二 一 二 )2?[Xdto) 二 MI 二 to)2(B(t) — B(to) +t— to)] 
十 如 

/i+tt X(to0) + bl1+t)(B()— Blto) +t—to0),0<to<t 
1+to 


例 5 C-R-L 电路 设 某 C-RL 电路 上 ，Q = Q(t) 为 + 时 刻 的 电荷 量 ， 它 满足 以 下 
微分 方程 
1 人 
Q(0) = Q@o,Q 0) = 了 
其 中 L.R.C 分 别 为 电感 ， 电阻 与 电容 ,dr(t) 为 电流 电压 ， 包 含 两 部 分 , 其 一 为 Gt) 
是 + 的 一 般 函 数 ( 非 随机 项 ), 而 a 为 常数 ， (W(t),t > 0) 代表 白 噪声 (随机 波动 ) 有 
W(t) = 由 外,t > 0, 即 W(t) 是 B.M. 的 形式 导数 . 
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为 求解 方程 (7.5.15), 引入 向 量 X(t) = (0 2(t))” = (Q(),8'(D))7, 则 


X1(t) = X2(t) 
LXIt) = —RX2(t) — EX1(t) + Gt) + oaWl(t) 





向 量 形式 即 
dX(t) = AX(t) dt + H(t)dt + KdB(t) (7.5.16) 


其 中 dX(t) = (dXi(t), dX2())7,，{B(t),t > 0] 为 一 维 标准 B.M. 














0 1 0 0 
4= 和 H(t)= | ， | 
-zr -I EG(t) 加 
(7.5.16) 是 一 个 二 维 线性 SDE. 
对 (7.5.16) 适当 移 项 ， 两 边 同 乘 以 积分 因子 et, 得 
eAtdX(t)— Ae- X(t)dt = eAi[H(t) dt + KB(t)] (7.5.17) 


其 中 e 全 = 开 世 0 所 和 4 加 令 
: : g1(t, T1, To | z 
g : (0,+%) x R? — R?,g(t,z1,722) = | 91( 1 2) ) ~e-At | 1 ) 


ga(t, 21, £2) 
(7.5.17) 写成 ， 
d(e- 沁 和 (四 ) = eAt[H(t) dt + KB() (7.5.17a) 
利用 1t6 公式 ， 可 得 ( 令 Y(t) = x ) 
d(e A X(t))= (-A)e X(t) dt +e tdx(t) 


将 上 式 代 入 (7.5.17a) 得 


X(t) = et[X(0) +e KB(t) + 下 es[H(s) + AKB(s)] ds] (7.5.18) 


其 中 (0) = (Qo, 了 0)7. 
$7.6 解 的 存在 和 唯一 性 问题 


前 面 我 们 着 重 讨 论 了 LSDE 的 解 的 显 式 表达 式 . 对 于 更 广泛 的 一 般 SDE, 首先 要 解 
决 其 解 的 存在 唯一 性 问题 ， 且 通常 很 难得 到 它们 移 显 式 解 . 但是， 研究 表明 ， 保 证 方程 
解 的 存在 唯一 性 条 件 下 ， 我 们 总 是 可 以 找到 它们 的 渐 近 解 . 本 节 给 出 SDE 解 的 存在 和 唯 
一 性 定理 及 其 渐进 解 . 


77 ， 解 的 基本 特性 与 扩散 过 程 


定理 设 随 机 过 程 卫 = {X(t),t > 0} 满足 1t6 微分 方程 


dX(t) = Dt, Xt) dt + olt, Xt) dB(t) (VO<t<T) (7.6.1) 


t t 
x =x0)+ | us, Xdas+ / o(s, X(s)) dB(s) (7.6.2) 
0 0 


若 b(t, 2),o(t,z) : [0,T] x BR 一 卫 满 足以 下 假设 条 件 : 
Al( 可 测 性 ) 5(t,z),o(t,z) 二 元 可 测 ， b(t,z)|3,o(t,2) € CE 辣 
A2(Lipschitz 条 件 ) 存在 常数 K, s.t. 对 vte [0,7T], Vz,yER 


b(t, 2) — b(t,y)| + lolt,z) — olt,y)| < Klz — yl 
A3( 线 性 增长 有 界 条 件 ) 存在 常数 C > 0 
b(t,z)|+lo(t,s)| < Cl+lzl) vielo,T],zeR 


A4( 初 始 条 件 ) X(to) 关于 五, 可 测 ， 且 BX?(t0) < cc 

则 存在 唯一 的 过 程 {X(t),t > 0} 满足 (7.5.1), 且 X(t) 是 自 适应 的 ， 关 于 五 可 测 ， 
对 vt € [0,T], EX?(t) < x. 

(证 明 从 政 ) 


$ 7.7 解 的 基本 特性 与 扩散 过 程 


在 介绍 Ité 随机 微分 方程 解 的 基本 特性 之 前 ， 我 们 先 引 出 扩散 过 程 的 概念 ， 扩 散 过 
程 在 物理 学 ,生物 学 , 信息 科学 , 金融 与 经 济 以 及 社会 科学 中 都 有 着 广泛 的 应 用 . 例如 描 
述 微小 粒子 的 运动 规律 ， 具 有 白 品 声 的 信息 系统 ， 完 全 市 场 中 的 股票 价格 的 波动 ， 生 物 
群体 的 变化 等 等 ， 因 此 研究 扩散 过 程 意义 重大 . 

定义 ” 设 连 续 参数 马 开 过 程 X = {X(t),t > 0}, 状态 空间 5 = 有 (或 Br" ), 且 满 足 对 
VzE Rt>0,ce>0 

1° limsoFP(X(t+h)— zr|> elX(t)= 2)=0 (7.7.1) 

2° limn ,oiE[((X(t+h)— rx) = 7] = ut) < (7.7.2) 

3° lims,oiBE[(X(t+h)— 22) Xt) = 2]=0(t,7)< cc (7.7.3) 

其 中 p(t, zx),olt,z) 是 二 元 函数 ， 且 0 < lett zl zj < se, 则 称 {X(),t> 0} 是 
扩散 过 程 , pt z),ctt z) 分 别称 为 扩散 过 稳 &X(t),t > 0} 的 漂移 系数 与 扩散 系数 . 

例 1 漂移 B.M. {X(t) = pt+o0B(),t>0), 其 中 jo 为 常数 ， 它 是 连续 参数 马 氏 过 
程 ， 其 微分 形式 为 4X(t) = jdt +odB(t). 
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易 知 它 满足 1°，2°，3°. 





Jim FP{IX(+h) -a > elX(t)= 2}= lin =P{lph Fo(B(t+h)--B(t))| > e} ”( 增 量 独 立 ) 


因为 B.M. 均 方 连续 , 即 B( a BG) (ho 0), 故 Juh4o(B(+Th)- BO "0, 


可 得 |jh 二 o(B(t+h)— B(t))| D0, a lim, ,0o $P{luh+o(B(t+h) 1 > ec}=0, 
满足 (7.7.1) 式 . 








lim > ELX(t +h)—z|X(t)= 72]= jim 7 [uh+o(B(t+h)— Bt)) 


三 = lim 3 人 +opEB(h)|=k 


满足 (7.7.2) 式 . 


el a 2 
lm FBX (t+h)— 2)|X(t) =7]= lm Bh+o(B(t+h) — Bt)) 


1.. 。 
= lim FA +2uhoBEB(h) +o E(B(t+h)— B(t))’) 


=o? 


满足 (7.7.3) 式 . 


因此 漂移 B.M. 是 扩散 运动 , 其 中 是 它 的 漂移 系数 ，o 是 它 的 扩散 系数 . 事实 上 ， 
/ 是 漂移 B.M. {XX(),t > 0} 在 单位 时 间 上 的 平均 漂移 ， 即 过 程 的 系统 性 漂移 ， 而 o3t 则 
是 过 程 在 t 时 刻 的 方差 . 正 是 基于 这 一 物理 意义 ， 使 它们 被 称 作 漂移 系数 和 扩散 系数 . 
例 2 设 {了 X(t),t > 0} 满足 Ornslein-Uhrenbeck 方程 (或 称 之 为 Langevin 方程 ) 


dX(t) = —nX(t) dt +odB(t) (7.7.4) 


设 X(to) = Xo ~ N(0,083), 且 与 {B(t),t > 0} 独立 ， 其 中 jy,o 为 常数 ， 则 其 解 
{X(t),t > 0} 是 扩散 过 程 . 


首先 ， 由 1t6 随机 微分 方程 求 得 ， 解 的 显 式 表达 式 为 
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t 
X(t) = Xoe ®t +/ el- dB(s) 
0 


7.7 ， 解 的 基本 特性 与 扩散 过 程 
由 表达 式 易 知 {X(t),t > 0} 是 正 态 过 程 ， 且 Vt > 0, BX(t) = 0， 


v0O<s<tCouvX(s), X(t)) = (s)X(t) (EX(t) = 0) 


二 ed a eqB(w)B(vj (Xo 与 BID) 独立 ) 


=e- ts)o2 + o? f[: Hse-Ht- EdB(u) dB(v) 


。 
A 下 S| ei du 
0 





(uv a =0,u=v EdB(u) dB(v) = du) 


=e-/(s+t)o? Fe s) — eH(s+t)) 


同 理 DX(t) = ge? 十 儿 (1 一 et) 
下 面 证 它 是 马尔 可 夫 过 程 . 


VO < < ttnwr ER1<EkZn, N 则 


E(X(tnri)|X(t1) = 21 ,X(t)= 2 


tnt+1 
=BEl(e /ttt tn) 三 十 下 e 


Art dBO))Xt) = 21 , X(t) = zl 
tn 


zne H(tntitn) 


同 理 BX (ts41) — X(t) IX (Ct) = aa 

这 就 说 明 ， X(t+41) 关于 X(t1) = zl 
zn 和 (tw+1 一 tn) 有 关 , 而 与 X(t1) = 21,……… 
可 得 X(t41) 关于 X(t1),… ,了 X 


Sl | 去 (1 — eH(tntiTtn)). 

… :天 ( 加 ) = zn 的 条 件 期 望 与 条 件 方差 仅 与 
,(tn_1) = mw_i 无 关 . 由 正 态 过 程 的 性 质 
(如 ) 的 条 件 概率 密度 函数 是 正 态 概率 密度 ， 为 


也 (1,Z1iyta,Z2， er i = ly) 


(wene H(intl in ))2 
. | 
六 





€ 
(z(1 — e—2n(tnti—tn))$ 





故 {X(t),t > 0} 是 马尔 可 夫 过 程 ， 其 转移 概率 密度 为 
二 人 L$(1 ~ e-2n(t-s)) -#0- he 


下 面 来 验证 (7.7.1) ~ (7.7.3), 对 vz ER.t>0,c>0, 求 liims_,o #$P( | 王仁 十 万 ) 一 2 > 
elX(t) = £), limn so jh (t+h)— eR) = 7], lm ot EI((X(t+h) — 2)|X(t) = a]. 
因为 由 Chebyschev 不 等 式 和 {X(t),b600} 的 性 质 ， 有 


0< P(X(t+h)— 2|> elX(t)=2 
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故 limp_ so 2P(X(t+h) 一 2 > elX(t) = 2)= 0. 


1 1 t+h 
lim zBEL(X(t +h)—z)|X(t) = 2]= lim ze 一 +/ eHtthT) dulX(t) = 2] 
Le 一 


一 一 WY 


Do El((X(t+h)— 2z) |X(t)= 2] 
1 Sr de | 
= lim Fee 1)? i mf eH(2t+th) oe-2uu du)|X(t) 二 z] = og2 
Rk t 


以 上 便 说 明了 0O-U 过 程 是 漂移 系数 与 扩散 系数 分 别 为 hz 与 0? 的 扩散 过 程 . 而且 
例 1, 例 2 都 表明 了 扩散 过 程 的 系数 与 Tt5 随机 微分 方程 的 系数 紧密 相连 ， 那 么 对 于 一 般 
的 1t6 过 程 ， 它 的 解 是 否 有 类 似 的 性 质 呢 ? 我 们 有 下 面 的 定理 : 

定理 7.7.1 设 It6 过 程 {X(t),t > 0} 满足 


(7.7.5) 


di i 
到 (加 ) = Z0 





其 中 {B(t),t > 0} 是 一 维 标准 B.M. po) 人 2 (to) 满足 假设 Al ~ A4, 是 
H(t,2),o(t,z) 是 二 元 连续 函数 ， 则 方程 存在 唯一 解 {X(t),t > 0}, 且 X(t) 是 扩散 过 程 ， 
且 











pt 
ln EX(t + -2X = #2] = 4, 2) 


让 2 
dim El(X (t+h)— 2) X(t) = 72] = 0°(,7). 


证 明 从 略 . 
练习 题 


7.1 设 Q = [0,1], 天 = 8[0,1], (8[0,1] 为 一 维 Borel o - 域 限制 在 [0,1] 上 的 e - 域 ). 
vA= (a,b) EF, (ab) CC[0,1, P(A )=b—o 令 Xn(w) = Vi locwciy n>1. 

(1) Ve > 0, 求 P(X, > e), 证 lim_,w X £0; 

2) 问 lim X 在 均 方 收敛 的 意义 上 是 否 存在 ? 说 明 其 理由 . 

7.2 设 {N(t),t > 0} 是 时 齐 参数 为 的 Possion 过 程 。 Vt > 0, N(t) 是否 均 方 连续 ? 
并 证 明 你 的 结论 . 

7.3 设 (X,Y 了 ) ~ N(0,0,07,03,p). 令 X(t) 元 过 十 本 ,工作 = {Xu) du, 2(t) = 
Xu du. VO<s<t 

(1) 求 BX(t), Cov(X(s), X(t)); 


练习 题 


(2) 求 EY(t), EZ(t), Cov(¥(s), Y(t)), Cov(2(s), 2(t)): 
(3) 证 X(t) 在 t > 0 上 均 方 连续 ， 均 方 可 导 ; 
(4) 求 Y(t) 及 2(t) 的 均 方 导数 ; 
1) 证 标准 B.M. {B(t),t > 0} 均 方 连续 ; 
(2) 证 B(t), 对 Vt > 0, 几乎 对 所 有 轨道 ， 没 有 有 限 导 数 ; 
7.5 设 铸 ~N(u,o?),Y ~ Ge(p), 即 P(Y =£)=(1-p) "lp, (0<p<1,k=1,2,...). 
X 了 独立 . 邻 和 并 四 三 碟 十 ce. 三 了 (四 二 XC dg 
1) 求 X(j 在 t>0 的 p.df.: 
) 求 BX(t),Cov(X(s), X(t)), (V0 < 3 <); 
3) 求 EY(t),Cov(Y(s), Y(t)). 
7.6 设 {X(t),t > 0} 的 均 方 导数 存在 ， EX(t) = 0, R(s,t) = BZ(X(s), 了 (t)), 证 
CB 
(2) E(X() SD) = ,= 
7.7 设 {B(t),t > 0} 为 标准 B.M. B(t) = 0, vt > 0, 固定 取 0=to<ti<.…<th=t 
Aty = th —thil bn = maxicren Atr, ABR = B(t)— B(tp_1), Bi = B(tr), 已 知 EB(t) = 
342. 证 
(1) lima 0 1 人 A? Br =; 
(2) Pllims, 0 Dr_1 A?B;, =t)=1; 
(3) Pllims, ~0 Di |ABr| = %)= 1: 
(4) lims, 0 1 Bi-1AB: = 了 世人 t, (mm.s.) 
(5) lims, ,0 Dn_1 BrABr = 下 tt, (im.s.) 
(6) 


6) lims,, so[5D2 1 Bltp_1 + 0Atr)( Br) — Bt 1))] = OE, 其 中 4e [0,1] 为 





固定 . 
7.8 设 {X(t),t € R} 是 平稳 过 程 且 BX(t) = 0, R(7) = e-2l7| 
(1) 证 w > 0, 均 方 连 续 ; 
(2) 证 vt > 0, 均 方 可 导 ; 
(3) 记 了 ( = fi X(s)ds, 求 EY(t),Cov(Y(s), Y(t)). 
7.9 设 h(w) 是 一 般 的 连续 函数 ， > 0, 记 Y(t) = 六 h(s) dB(s), (B(0) = 0) 
1) 证 {Y(t),t > 0} 是 拷 ; 
(2) vt > 0, 和 ER, 证 


入 2 t 
Elezp(X | h(s)dB(s))] = ezp( | hi(s)ds). 
Eap /MaB(9 = cart | las) 
7.10 h(u) 同 题 79, 且 是 有 界 变 差 函 效 ; 证明 


中 t 
”| h(s) dB(s) = h(t)B(t) — [ B(s) dh(s). 
0 0 
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7.11 用 745 积分 定义 证 万 sdB(s) = tB(t) 一 太 B(sjds， (提示 : DD 人 (spBi) = 
2 skAB 了 TBkAsR ) 
7.12 用 It6 We 


1) fi B( B(s) = 2 (提示 : A(B2) = B? 一 Bi2_i = A2B, 十 2Bi_1(AB;), 
B* oo 2 人 0 A?B, + 2 Br_1AB:); 
2) jo B*(s)dB(s) = 33 — J B(s)d 


7.13 设 Oe > 0} 满足 dX(t) = Di(t) dt 二 on(t) dB(t), 1 <%<2, 其 中 ,oi 满 

是 116 公式 的 条 件 , 证 d(Xi(t)X2(t)) = Xi(t) dX2(t) + X2(t) dXi(t) + dX1(t). dX2(t). 
7.14 利用 It6 公式 ， 求 以 下 诸 过 程 所 满足 的 Tt5 随机 微分 方程 : 

1) X(t) = Bt); 

2) X(t)= a+t+e?); 

3) X(t) = eiteBW), 

4) X(t) = escosB(t). 

7.15 求 下 列 16 随机 微分 方程 的 特 解 ( 若 给 出 初始 条 件 ) 或 一 般 解 ，t > 0 

1) dX(t) = wuX(t) dt 二 odB(t), ( wo > 0 为 常数 ),(Ornstein-Uhlenbeck 方程 ); 


X(0) ~ N(0,o?), 且 与 {1B(t),t > 0} 独立 . 
2) dX(t) = i 
3) dX(#) 二 ydt 十 Q(t) dB(t), (ya 为 常数 ); 
4) dX(t)}= (mo— X(t)) dt 本 ( m,o > 0 为 常数 ); 
5) dX(t) = (eT! 十 钴 (#)) dt 十 OX(t) dB(t), (0o > 0 为 常数 ). 


7.16 设 V(t) = eatB(ezeb)， a > 0 为 常数 ). vt > 0. 
1) 求 litns 56 FE[(V(t + h)— Vv; 
2) 求 liim ,ozBI(V (t+ h)— > ?|T 
7.17 设 {Xte RR} 满足 1t6 方程 。dX(t) = b(t)X(t) dt 二 a(t)dB(t), (其 中 b(t),o(t) 
1) 求 liimn_,oRE[(X(t+h) — X(t))XE)]; 
2) 求 limn ,oz E[(X(t+h)— X(t))|X(t)]. 
7.18 设 {Bt E (一 20, 十 2%0)} 为 标准 B.M. 二 阶 窍 过 程 {X(t),t € (一 ,十 %%)} 满足 
It6 方程 : dX(t) = -aX(t)+ dB(t), X(-%)=0,a>0 
(1) Vs,t>0, 求 了 (s 十 在 卫 (s) = zz 下 的 条 件 p.d.: 
(2) Y0 < 本 <t< < 机 <tnti; 求 了 (w+1) 在 (机) = zx, (1 <k<n) 下 的 条 件 
BE Es 
3) 试问 {X(t),t€ (--~%, 十 %)} 是 否 是 平稳 过 程 ” 马 氏 过 程 ? 款 ? 证 明 你 的 结论 . 
7.19 设 { 和 区 ,teE(-cc,+co)} 同 题 7.18， {Y Go E (一 00, 十 oo0)} 满足 方程 : dY(t) = 
BY(t) dt+ dX(t), 8>0 





练习 题 


(1) Ys,t0, 求 了 (ls 二 加 在 YY(s)=y 下 的 条 件 p.d.; 

(2) Vt > 0, 求 linno $B[(Y(t +R) oY)), ln so FBI(Y(t +h) Y(t) Y(t)]. 

7.20 设 颈 = {X(t),t > 0} 是 满足 题 7.15(1) 的 特 解 . 

(1) 试问 荆 是 否 是 马 开 过 程 ? 试 证 明 你 的 结论 ; 

(2) 若 筷 = {X(t),t > 0} 是 M.P., 试 求 它 的 转移 概率 密度 函数 f(s, xz;t,y), 即 f(s,2;t,y) 
满足 : 对 V0 <s<tzr,yeER,BeEB, 有 : P(X(s+t)€E BIX(s)= 72)= Jyes f(s, 2;t,y)dy. 
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第 八 章 ” 宽 平 稳 过 程 


所 请 平 稳 过 程 ， 粗 略 地 说 ， 就 是 指 它 的 概率 特性 不 随时 间 推 移 而 变化 的 随机 过 程 . 
这 类 过 程 在 工程 技术 中 比较 常见 ， 本 章 着 重 介绍 其 中 的 宽 平稳 过 程 . 
以 下 各 节 中 ， 我们 设 Xz = {X(t),t eT} 为 随机 过 程 ， 并且 记 mm(t) = BX(t), D(t) = 


FE R(s,t) 
DX(t). R(s,t) = Cou(X(s), X(t)), p(s,t) = or 





$ 8.1 ” 宽 平 稳 过 程 的 定义 与 举例 


os 设 随机 过 程 Xr = {X(t),t € T}, B|X(t)? < x, ( 即 Xz 为 二 阶 窍 过 程 ). 若 
加 X(t) = m 为 常数 ，Cov( 针 (t), 久 (3)) = EB[(X(t) mm)(X(s) — mm)] = R(t s), 则 称 Xz 为 
1 或 ee 

当 卫 = 2 = 1{0,+1. …} 时 ， 称 Xz 为 平稳 序列 . 

0 民 (序列 的 例子 . 

例 1 (1) 设 t= {tn,n Ee 2}) 为 实 的 (或 复 的 ) 随机 序列 ， 且 EBén = 0. Blétnj?=0?< 


0,Béném = nm ‘07 其 中 
| 人 
Onm = 
0 nz 上 m 


可 见 《= er re 2] 是 江平 稳 过 程 ， 人 们 党 区 < = [en 2] 为 自 也 声 ，. 
(2) 设 XX, = Di arén_n, 其 中 {6,n&E 2} 为 白 噪声 ， i> lax? < x. 为 了 
Ce Xn ee 我 们 先 来 证 明 + 、axtn_x 是 有 意义 的 . 
= wanna, 则 对 vn, (EN > 0) 均 方 收 化， 记 并 本 ak 全 
lin x 有 意义 .这 是 因为 vne 2 固定 当 N>M 时 


EX .gd =B| >》 arén_x| 三 o> 》， laxl|? VM 60 0 
M<IEI<N M<IkKI<N 




















即 {XA7,N > 0} 关于 WW 是 Cauchy 序列 ， 所 以 3 筷 ， 全 limnv sw = DR dénp. 
现在 来 考察 X, 的 概率 特征 : 显然 BX,, = 0， 


R(n,n+tr) =E(Xn Xr) = El( >， ReEn 有 artn+1-1)] 
k=—o0 1 三 一 20 
dara)o? = 全 Ry 
-> a 64 


上 式 只 与 时 间 差 7 有 关 . 所 以 XT = {Xn,n& 21} 为 宽 平 稳 过 程 (序列 ). 


8.1 ” 宽 平 稳 过 程 的 定义 与 举例 


例 2 随机 人 简 谐 运动 的 琶 加 
(1) X, = Ecosnw 十 nsinnw, n € 2Z, 其 中 ww € [0,7] 为 角 频 率 . Bt = En = 0， 
Be = Br 二 0, 且 BE(&n)=0, 即 &,% 互 不 相关 . 称 X, 为 随机 简 谐 运动 显然 BX = 0 


R(n,nt+7)=E(Xn, Xn4r) = El(€ cosnw + nsinnw)(é cos(nt+ 7r)w t+ nsin(n t+ 7)w)] 





一 az2(cos(m +r)jwcosnw + sin(n + r)wsinnw) 


: A 
=0? cosrw ER(7) 


上 式 只 与 时 间 差 ” 有 关 ， 所 以 X,, 是 宽 平 稳 过 程 . 

(2) Xn = Dro(Er cos nw + Wr sin nw ), nn € Z, 其 中 wi € [0,7], 为 角 频 率 . Bex = 
Erm, = 0, EE? = En = o2, E(é€1) = Em) =0 (KFAD. VE <m, Elépm) = 10. 于 
是 可 得 EBX, = 0， 


R(n, nn 二 7) =E(Xn Xntr) 


mm mm 
=B[D (er COS NW 十 9 Sin nw ) DG cos(n + Uw nsin(n + Daw)] 
k=0 1=0 


mm 
ee 3 OK 2 [cos( NT) Ww cos nw sin(n + 7) wr sin nwa] 


mm 
-= > OR COS Pa 


上 式 只 与 + 有 关 ， 所 以 X, 为 宽 平 稳 过 程 . 
(3) XX, pe otke i, 其 中 EF 性 质 同 上 ， 且 DD <o0nE€ Z， 则 由 区 < 
Do tr(cosnw + isinnw:), 可 得 EX,, = 0. 





co 
R(n+r,n)= E( (Xa HO EN 3 0 二 > Or2eires = R(7) 
划 沪 村 


上 式 仅 与 7 有 关 . 所 以 复 随机 序列 X, 为 宽 平 稳 过 程 . 

着 令 0 = D008, pr = 荨 , Vw € [0,7] 记 也 (w) = Dy,<w pr; 易 知 ，F(w) 是 [0.7] 
上 的 单调 不 减 ， 右 连续 的 台阶 形 函 数 ， F(0) = 0,F(x) = 1. 即 F(w) 是 [0,7] 上 的 一 分 布 
函数 . 它 是 刻 划 不 同 频率 电流 分 量 的 分 配 . 通常 称 F(w) 为 电流 和 ,的 功率 谱 函 数 ( 详 见 
本 章 第 四 节 ). 则 相关 系数 








Co 


R(7) 之 | 
p(7) = RD = Ops iT = cos Tw + Lsin rw ) = > Per 二 eedF(w)， 
k=0 $=0 








即 p(7) 可 看 作 是 Fl(w) 的 富 利 埃 变 换 。 266 
这 说 明 ， 当 角 频 率 不 同 对 应 的 随机 振幅 互 不 相关 的 可 列 (或 有 限 ) 个 随机 简 谐 运 动 的 
从 加 是 一 平稳 序列 . 
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这 样 ， 如 果 将 X, 看 作 是 时刻 电流 ， 那么 它 可 以 看 作 是 由 不 同 角 频 率 wx 电流 
分 量 按 wi 对 应 的 &1 为 随机 振幅 全 加 而 成 ， 则 px 表示 电流 在 不 同 频 率 上 的 功率 分 


配 ， 

推 而 广 之 ， 是 否 任意 的 平稳 随机 序列 都 可 以 得 到 如 上 述 相关 函数 类 似 的 分 解 呢 ? 或 
者 说 ， 是 否 它们 都 对 应 一 个 如 olr) 的 功率 谱 函数 呢 ? 这 个 问题 我 们 将 在 后 面 第 四 节 中 回 
答 ， 

宽 平 稳 过 程 的 基本 特征 ， 是 协 方差 函数 只 与 时 间 差 有 关 ， 并 不 随时 间 推 移 而 改变 . 
因此 在 宽 平稳 过 程 中 ， 协 方差 函数 非常 重要 . 下 面 我们 就 介绍 协 方差 函数 的 几 个 基本 性 
质 . 设 R(s,t) 是 {X(t),t ET} 的 协 方差 函数 ， mlt) 是 其 均值 函数 ， 

1” 实 随机 过 程 的 协 方差 函数 是 对 称 的 ; 复 随 机 过 程 的 协 方差 画 数 是 共 罗 反 对 称 的 ， 
即 当 天 人) 是 实 的 ， R(s,t) = R(t,s); 当 X(t) 是 复 的 ， R(s,t) = R(t,s). 

证 ”由 定义 R(s,t) = Cov(X(s), 义 ()) = B[(X(s) 一 m(s))( 基 (#) 一 ml(t)), 易 得 上 述 
结论 . 

2 ” 协 方差 函数 是 非 负 定 的 . 即 对 yn > 1, Yni,T2,… ,Th ET, Vz1,… ,zn ECO 有 
2 D1 RTE Tj)Z > 0. 

证 ”由 定义 


>》 >》 ROT)z = ,> EX(Tm) — mm) (XT) — mm(n))]a 


天 三 二 了 二 $=1j=1 





n 


= 如 >》 (X(7) 一 7 让) 四 》 (X(T) 一 ?2( 万 ))2] 
k=1 si 


=B[| YX(m) — mn))zrl] > 0 
k=1 
3” 宽 平稳 过 程 的 协 方差 函数 R(s,1) = R(s 一 们 . 它 具 有 以 下 性 质 : 
1) R(0) = D(t) (由 定义 易 得 ) 
2) |R(z)| < R(O) (由 schwartz 不 等 式 易 得 ) 
3) R(z) = R(—z) 
因此 实 平 稳 过 程 的 协 方差 函数 是 偶 函 数 . 
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1. 正 态 过 程 

正 态 过 程 在 工程 技术 与 管理 中 有 广泛 的 应 用 ， 同 时 它 也 是 随机 过 程 中 一 个 重要 的 分 
文 . 一 方面 ， 它 是 二 阶 和 窍 过 程 的 代表 和 典型 ， 鸭 5 方面 它 在 理论 上 又 具有 许多 良好 的 性 
质 ， 特 别 是 它 的 概率 特性 仅 由 它 的 均值 函数 与 协 方差 函数 唯一 决定 . 本 节 将 进一步 讨论 
它 的 几 个 特性 ， 为 此 ， 我 们 先 回顾 ” 维 正 态 随机 向 量 的 定义 ， 然 后 ， 进 一 步 推广 . 
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定义 ” 设 X= (Xi,1<k<n)7 是 n 维 随机 向 量 , 我 们 称 它 是 nn 维 正 态 随机 向 量 ， 
者 它 的 概率 密度 函数 为 : 


fa) = (27)-E2I-Eexp[3lz 一 和 -it 一周 (8.2.1) 


其 中 z= (zr,1 <k<n)7eR?,j= (jl1<k<n)7,1<k<n, 台 是 n 阶 正定 对 称 
和 矩阵， 此 时 记 作 XX ~ NI 了). 

易 知 ， BXi; = jx,l1 <k<n,5 是 X 的 协 方差 矩阵 ， 即 : = BE(X 一 j)(X 一 1)7 
且 碟 ~ N(U1.3) 的 特征 函数 为 p(t) 全 Bei = exp(iyTt 一 75t), 其 中 t= (ts,1<h< 
nj)7 E R". 证 明 可 见 参考 书 [0]. 

在 (8.2.1) 中 ， 要求 是 正定 对 称 阵 ， 以 保证 3-:1 存在 ， 否 则 该 表达 式 没有 意义 . 可 
用 特征 函数 推广 多 维 正 态 分 布 . 

定义 y(t) = exp(ip7t -32) 是 4 维 随机 向 量 X= (ZL1<<od) 的 特征 函 
数 ， 其 中 te RE BR 了 是 4 阶 非 负 定 对 称 乍 阵 ， 则 称 和 为 a 维 正 态 分 布 随机 向 量 ， 
记 为 各 ~ NA 了 ). 

注意 ， 此 时 对 det = 2 = 0 的 情形 仍 有 意义 ， 但 其 p.df. 无 法 表示 ， 可 以 证 明知 
rank 二 7 (7 < dd), 则 其 p.df. 集中 在 一 个 7 维 子 空间 上 ， 这 时 称 为 退化 正 态 分 布 . 

引 理 8.2.1 若 4 维 随机 向 量 XXX 特征 函数 分 别 为 wa(,p(, 且 linn vs 芝 
, 则 对 Vi > 0.pn(b 一 9 区 

证 “” 仅 证 当 和 与 XX 都 是 一 维 随机 变量 的 情形 . 

vi>0 固定 , 因为 leitX™ eitX| < < [XY X|2, 则 [palt (DP < < leitX™ eitx ||2 < 
由 一 ,得 limjw pn(t) = yp(#). 当中 与 XX 0 i 

对 于 正 态 随机 序列 ， 它 们 具有 以 下 的 性 质 : 

命题 8.2.1 若 和 = (Xi" ,1<k< dd) 为 a 维 正 态 随机 向 量 ， 且 六 WW 均 方 收敛 于 
X= (Xil Zh dd) pm 对 VI < Ek Za X Xi = EIX" — Xi 0n = 0), 则 
五 二 (Xj,1 <k<d) 也 是 4 维 正 态 随机 向 量 . 

证 记 BX = p= pL Ck, EX=p= (pl < <d 2 = 
EX pONKXY YT = 0), B= EX- WF- 1) = (ci 

则 由 XW" 吕 " Xn,1<k<d, 有 








lim pl = pr l1<k<d (8.2.2) 
及 一 Do 


及 


lim ol ) 一 ok Le el TE (8.2.3) 


用 一 Co 


则 由 了 为 a 维 正 态 随 机 变量 ， 汉 68 


2 
pn(t) = ewp(itT NI EE 5t Pt) 
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由 (8.2.2) 及 (8.2.3) 得 lim ,x pn(t) = ezp(itTh 一 34t75t). 由 引 理 8.2.1, 有 的 特 
征 函 数 p(t) = lin ,~ pn(t) = erp(itTh 一 3 5t). 

所 以 了 也 是 4 维 正 态 随机 向 量 . 

命题 8.2.2 设 Xr = {X(t),t E 个 } 为 均 方 可 导 (可 微 ) 的 正 态 过 程 ， 则 均 方 导数 过 
程 {X'(t),t eT} 也 是 正 态 过 程 . 

证 : ”由 正 态 随机 向 量 对 线性 变换 的 封闭 性 和 定理 8.2.1 知 , 知 X15 存在 , 则 {X(tx) = 
limn_,o tt) 1 < <d) 是 正 态 过 程 . 

命题 8.2.3 设 Xr = {X(t),tE 全 } 为 均 方 可 积 的 正 态 过 程 , 令 Y(t) = J X(wdw (a,te 
72) 则 {Y(t),t eT} 也 是 正 态 过 程 . 

证 : ”对 Vi ET 由 均 方 可 积 的 定义 知 : 


Y(tr) "> > X(sn)Asr. 
{=1 


其 中 4 = so < s1 < … < sn = 如 由 正 态 过 程 对 线性 组 合 的 封闭 性 和 定理 8.2.1 得 
{7(,te 2 是 正 态 过 程 . 

引 理 8.2.2” 设 ( 实 ) 二 阶 矩 过 程 Xr = {X(t),t E T} 是 平稳 过 程 且 均 方 可 微 ， 则 
v ET 有: 

BE(X(t). X(t))=0 

证 : ”由 Xz 是 平稳 过 程 ( 实 ), 则 R(7) = R(--7), 故 p(7)=p(-7), 又 因为 Xz 均 方 
可 微 ， 所 以 R(s,t) = R(s 一 t) = Cov(X(s), 下 (t)) 广义 二 次 可 导 ， 故 p(7) = 3 存在 二 阶 
导数 ， 因 此 p(7) = 一 p'(--7), 令 7=0, 则 BR(0) = 一 R(0), 故 : (0) =0, 由 第 七 章 命题 
7.1.2 有 : 





BE(X(s) ED) = Jian BEE， 
jm R(s,t+h)— R(s,t) 
一 0 h 


0 
= (5 


X(t+h) X(t) 
| 





由 此 知 : 
E(X(t)}. X(t)) = R'(0) = 0. 
由 引 理 8.2.2 很 容易 推导 出 正 态 过 程 的 以 下 性 质 : 
命题 8.2.4 设 Xr = {X(t),t€ 了 T} 是 平稳 正 态 过 程 且 均 方 可 导 ( 可 微 ), 则 vi € T,X(t) 
与 X'(t) 相互 独立 ， 且 若 R(s,t) = R(s 一 +t) 是 Xz 的 协 方差 ， 则 : 





jx 1 04 
De OsOt 
基于 正 态 过 程 独立 与 不 相关 的 等 价 性 ， 我 们 可 以 得 到 正 态 过 程 和 马 氏 过 程 之 间 的 联 


系 . 





R(s,t)|;-+ = —R"(0). 
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2. 马尔 可 夫 正 态 过 程 

定义 ” 设 马尔 可 夫 过 程 Xr = {X(t),t > 0} 又 是 正 态 过 程 ， 则 称 Xz 为 马尔 可 夫 正 

为 讨论 马尔 可 夫 正 态 过 程 的 重要 性 质 ， 先 给 出 n 维 正 态 分 布 的 条 件 p.df. 设 = 
{X1, 2,… ,Xi} 是 mn 维 正 态 过 程 ， 其 联合 概率 密度 为 : 


> a 1 nn nn 
f(z1*: ,Tn) = (27) /24 "/?)exp[-3 >》 ， >》 aigoj] 
19=1 
其 中 4-1 = (oz ) 为 对 称 正定 矩阵 . 现 考虑 X 在 给 定 X1 = x1,… ,Xn-_1 = zol 下 的 条 
件 p.df. 记 为 f(znlz1, ,Tn—1). 它 等 于 : 
jz ao) exp[-$ D1 D1 0c 


十 2 ff 十 co 1 > 
f(z1. ,Tn dr 的 exp[—3 D9 a ij iTj den 


由 Di Dy oiw = Dr D0 十 Gan 二 274. D1 onoi 从 (*) 式 的 分 子 
分 母 中 消去 与 2 无 关 的 因子 后 ， 我 们 有 : 


exp(—#$anne? 一 Cn ye in Zi) 
f(zn|g1, ;Pn-1) = od 1 让 
ei exp(—30nnT — Cn" De Cin Ti drn 
4 r 
exp1{ 一 $ann [zn 所 > (hin ps )zi]?} 
EE exp{—$ann [zn 十 Do (iw nn) al” dn 


oc 


(*) 











n—l 


1 
=c. exp{—5ann [en 十 》， 
一 


Cin 





zi] >} (8.2.4) 


& 刀 妨 


其 中 <。 为 规 一 化 的 常数 ， 与 (zt1,… ,za-1) 无 关 ， (8.2.4) 式 是 一 正 态 p.4f 其 均值 
为 — DY (gin /ann) Zi. 于 是 : 








n—1l 
ui 
E(X, |X1 te > ， 二 Ti, (8.2.5) 
i=1 7 
Un— 
E(Xn|Xn_1 一 Zn_1) = 一 一 i Tn—l1. (8.2.5a) 
Unn 


设 {X(t),t > 0} 为 正 态 过 程 ， 不 失 一 般 性 设 BX(t) = 0. 记 R(s,t) = EB(X(s)X(t)), 
p(s,t) = R(s,t)/(R(s, s)R(t,t)). 

命题 8.2.5 设 {X(t),t > 0} 是 正 态 过 程 ， BX(t) = 0, 则 它 也 是 马尔 可 夫 过 程 的 充 
要 条 件 是 : V0 < <to<.…<t,n>9, 


E{Xi, |Xi, 一 21 ,Xi = Zn-1} 和 E{X:, [Xi 一 Zn-1}. (8.2.6) 
证 : 必要 性 显然 . 为 证 充分 性 ， 注意 到 (8.2.5) 及 (8.2.5a) 可 得 : Cn 三 42n 二 
mn =0: 故 由 (8.2.4) 有 : 270 


1 tne= 
f(zn le1, 和 ,Tn—1) 二 C exp{ 一 本 con[2n 站 1]?} 
Wnn 
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每 
f(zn|zn-1) = exp{ 一 am Em 十 nan} 


故而 充分 性 得 证 . 
命题 8.2.6 ” 设 {X(t),t > 0} 是 正 态 过 程 ， BX(t) = 0, 则 它 也 是 马尔 可 夫 过 程 的 充 
要 条 件 是 : V0<ti<ts<ts, 


plt1,t3) = plt1. t2)p(t2,t3). (8.2.7) 


证 : ”二 >, 设 X(t) 是 马尔 可 夫 过 程 ， 则 由 (8.2.5) 式 得 对 任意 0<s<t 





BE = 0 = (Se) (8.2.8) 


Unn 
为 求 (an_1n/Cnn) 考虑 (X(s), X(t)) 的 j.p.df. 


> 1 
ez za) = (27) A | exp(—52" Az), 





—R(s.t) R(s,s) 








R(t.t) -R(t,s) | 








BE(X(HIX(s) = 2) = (起 93) x. (8.2.9) 
再 由 马 氏 性 ， 
Rlt1,t3) = B(X(t)X (ta) = B{ELX(t) XC) = BE{BIX(t)| X(t BIX (ta)|X (ts)]} 


由 (8.2.9) 式 得 : 





R(ti,t» 、 
R(t1,t3) = 机 XC) 


由 上 式 可 得 (8.2.7) 式 . 
< 一 , 由 (8.2.7) 式 ， 可 得 : 对 Yl1 <k<n-l. 


pltrstn) = pltxr,tn-1)pltn-1, tn 站 


即 : 271 
R(tpstn a) l(tairta) 


tx,tn) = 
R(tx, tn) R(tn_1,tn1) 
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从 而 对 Y0 <k<n1, 


R(tn i tn) _n 
E { [x 3 x) X(t) ne 0, 


这 就 意味 着 正 态 rv.X(t) 一 关于 尘 天 (#-1) 与 六 (本 ),… ,X(t-1) 相互 独立 ， 故 : 


B {X(t) -Xl st 


X(t X(t) = 21 ,Kt 1) = tn 
R(tn-1,tn-1) ( 1 人 1) 
即 : 


tn te) 


Dn EAX(tn)|X (tn 1) = Pn. 
Rn to 1) {X(t )|X (tn-1) 1} 


3. 平稳 正 态 过 程 
平稳 正 态 过 程 是 平稳 过 程 中 的 一 个 重要 代表 . 这 里 给 出 它 的 一 些 主要 特性 . 
设 {X(t).t ET] 为 实 正 态 过程 . 不 失 一 般 性 ， 设 BX(t) = 0,R(s,t) = EB(X(s)X(t)). 
有 如 下 的 : 
命题 8.2.7 一 实 正 态 过 程 {X(t),t > 0} 是 严 平稳 过 程 的 充 要 条 件 是 : v0 < s<4 
有 : 
R(s.t) = R(t — s). (8.2.10) 


证 : 设 {X(t),t > 0} 是 严 平稳 过 程 ， 则 Vs,t>0 及 7T, 有 


R(s,t) = E(X(s)X(t)) = E(X(s+7T)X(t+7)) = R(s+t+7,t+r7). 


入 


上 式 中 取 r= -s 得 R(s,t) = R(0,t— s) 人 R(t s). 
反之 , 车 R(s,t) = R(t 一 5), 则 V0 和 <t < 之 机,( 玉 (机 ),… ,了 (t;)) 的 特征 函 
数 为 : n nn 
2 Un) = exp{ -3 OD uw R(t —t)} 
i=1 j=1 
而 这 也 是 (X(ti 十 7),… ,六 (tt 十 7)) 的 特征 函数 ， 故 {X(t),t > 0} 为 严 平稳 过 程 . 
推论 ” 宽 平稳 正 态 过程 也 是 严 平稳 过 程 . 
什么 时 候 一 个 平稳 正 态 过 程 也 是 马尔 可 夫 过 程 ? Doob 给 出 了 这 个 问题 的 回答 . 
命题 8.2.8 ”一 个 均 方 连续 的 平稳 正 态 过 程 {X(t),t > 0},BX(t) = 0. 也 是 马尔 可 夫 
过 程 的 充 要 条 件 是 相关 函数 : 
p(T) = e+"l, (8.2.11) 


其 中 /> 0 为 常数 . 
证 : ” 因 {X(t),t > 0}) 均 方 连续 ， 扫 是 正 态 过 程 ， 则 由 命题 (8.2.7) 有 : 


R(s +t) = R(s)R(t). (8.2.12) 
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即 p(s+t) = p(s)p(t), 且 p(t) 在 p(0) 连续 ,但 p(0) =1, 可 得 p(t+h)--p(t) = p()(p(h)-1) 一 
0， hh 一 0 时 得 p(t) 对 Vt& BR 均 方 连续 又 由 (8.2.12) 式 得 方程 p(s 十 t) = p(s)p(t), 知 
p(T) = eh | > 0 为 常数 .又 p(7) = p(-7). 得 : plr) = elrl， 

反之 ， 若 p(7) = ee 则 可 得 p(s,t) = p(t 一 s),p(s++t) = p(s)p(t). 于 是 V0O<U< 
t2 <t3, 有 p(ts 一 5 = p(t2 —t1)p(t3 —t2), 即 : p(ti,t3) = p(t1,t2)p(t2,t3). 由 命题 8.2.6 
可 得 {X(b,t 之 0} 为 马尔 可 夫 过 程 . 
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所 谓 ARMA 过 程 ， 即 Autoregressive Moving Average Process, 亦 即 自 回归 滑动 和 过 
程 ， 其 数学 定义 如 下 : 
定义 ” 设 {ms2 为 日 噪声 序列 ， 若 {XX,n E 2 是 满足 下 列 方程 的 平稳 过 程 : 


Dp 


Da Xnk = De- 1 (8.3.1) 
帮 生 各 
其 中 oo = 1ax,500<h<p,0<1<g 均 为 常数 , 且 a(z) 全 DP_oarst 与 B(z) 全 obiz! 
的 根 都 在 单位 圆 外 . 则 称 {X,,,n & 2} 为 ARMA 过 程 (或 ARMA 模型 ). 
ARMA 模型 在 工程 技术 ， 自 动 控 制 等 领域 具有 重要 意义 . 我 们 仍然 由 简 入 繁 来 讨论 
ARMA 模型 的 性 质 . 
1. 一 阶 自 回归 模型 AR(1) 
以 下 讨论 均 假 设 {5&,,n € 21} 为 白 噪声 ， 即 Bé,, = 0, BEE = om 07 
设 {Xn,n€ 2} 是 二 阶 矩 过程， 若 它 是 满足 下 列 方程 的 平稳 序列 





Xn — aXn-1 = én lal 交 站 
XX_~ 三 0 


oe 为 AR(1) 模型 . 
1) 先 看 Xo = 0 时 的 情形 : 
0 所 二 Dd y ar én k 二 4" Xo 三 2 =0% Ens k, 且 对 于 7 > 0: 


n+r—1l1 
bee Sn—k .> se 
t=0 
n— a 1 
本 
> > 4 tot 
ko Fe 


E(XnXntr) 一 





=E 
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(2) 当 匀 -x = 0 时 ， 有 X= 0 类 似 于 (1) 可 得 到 E(Xn Xn4x) = 2ur 
(>0). 即 当 7 > 0 时 ，R ; = - 呈 s, 故 p(7) =ar. 一 般 的 当 rE 2 











1= sz,( 


时 ， p(7) = al 
于 是 可 以 得 到 ol7) 的 图 如 下 : 
Por) 


Pr) 











(0<o) 


因为 差分 方程 X, 一 ao -1 = 0 的 一 般 解 是 X= ca"(c 为 常数 ). 显然 对 于 (8.3.2)， 
它 有 一 般 解 蕊 ,= ca” 十 并 这 ore -hfe 为 常数 ). 则 当 |a| 使 已 均 方 有 意义 ( 即 |a| < 1) 
时 ， (8.3.2) 一 定 存 在 一 个 特 解 是 平稳 解 . 即 : X, = 守 人 on 

注 X; 可 由 即时 刻 (包括 nn 时刻) 之 前 的 噪声 &,&,_1,.… ,的 线性 组 合 表示 . 故 vVk > 1 
cov(€n+n, Rn) =0, BB é, rr LX Vn E ZR>1. 

2. 高 阶 自 回 归 模型 AP(p)(p > 2) 


p 
bpD cn = én. 


k=0 


例 当 p= 2 时 ， AR(2) 模型 为 满足 下 述 条 件 的 平稳 序列 {X,,n € 2 














Xn Q1 有 1 十 qd2 肥 nm ES (8.3.3) 


其 中 a1, as 是 常数 . = 1 十 a1z 十 azz? 是 方程 (8.3.3) 的 系数 多 项 式 ， 且 f(z) = 
22 十 oz 十 oo 二 (一刀 )(2 一 2 满足 |ui| < 1( 不 妨 设 ui 关 wo). 

为 了 进一步 研究 方便 ， 我 们 引进 向 后 推移 算 子 (Backward Operator)B, 即 BX 
Xn_1, BIX, = B(BX,) = Xo ,BIX, = B(B*T1X,) = Xi, 设 B-! 是 B 的 
道 , 记 B-1B = 了 I. 有 : B-i(BX,) = IX, = X,,B-IX, = Xrl. 

设 多 项 式 aq(z) = ) 半 oarz*, 则 它 相应 的 B 算 子 多 项 式 为 : 


p 
a(B)= >》 ak 了 
kt 
规定 a(B)X 全 可 oonXn-n. 将 a(B) 的 道 记 为 a(B)-! 全 训 不 失 一 般 性 ， 以 下 均 
假定 了 X_ = 0. 这 样 limy_, B*X, = li ~ Xi 二 X ww 二 0, 攻 可 约定 lim;_ BF = 
0,(0 算 子 : 0X = 0)， 这 时 算 子 多 项 式 的 运算 规则 与 通常 多 项 式 的 运算 一 样 ， 如 : 由 
Q(z) = 1+a1z+a2sz? = (1-uiz)(1 一 Ww2z) 可 得 a(B)= T+a1B+a2B? = (I—-uB)(I—-uB). 
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此 外 ， 还 可 得 到 : (I 一 B"1!)=(I-B)(5)x-0B”), 令 n 一 x 则 I=(I-B)(5roB*) 
即 : 
(本 -2 二 =》 了 


间 理 3 信 三 让 瑟 达 1 交 2 用 人 
这 样 我 们 就 可 以 利用 五 算 子 解 方程 (8.3.2). 由 ,aX,_1 = ,有 : (1_aB)X, = 
故 


1 ee A 
了 re TB Co (> oO B )én >》 ,axen 
长 二 总 天 二 0 


当 lal < 工时， X。 有 意义 .利用 算 子 求解 方程 (8.3.2), 其 简便 性 一 目 了 然 . 
以 下 ， 我 们 利用 B 算 子 求解 (8.3.3). 
(8.3.3) 所 示 差 分 方程 的 解 的 结构 与 一 般 差 分 方程 类 似 ， 即 它 的 一 般 解 是 其 对 应 齐 次 
方程 
十 aiX 1 二 aoXn_a=0 (8.3.3a) 


EE (8.3.3) 的 一 个 特 解 . 
由 f(z) = (z 一 uw)(z 一 us) 易 得 (8.3.3a) 的 一 般 解 为 : C1UT + C2u3. (8.3.3) 的 一 个 
i 了 算 于 求 出 . 
由 ea(z)=1+az+oaz = (1 — wz)(l — uz) 可 知 a = T+aB+aB’ = 
(I 一 wB)(T 一 uwB). 则 (8.3.3) 可 写成 : a(B)X = &, 故 : 2 =a 1(B)&n. 而 

co (B) = 二 (EE 0 waB) ui ua RS pe 











因此 
二 ! = 时 一 y out 一 ustl)é (8.3.4) 
“AT 二 有 2 2 ok 和 


当 Wl Ls 时 ， C1UY 十 C2u3 > 0. 若 取 ci = cs = 0 易 验 证 由 (8.3.3) 式 表 示 的 
过 程 Xr = {X。,n E Z} 是 平稳 过 程 . 因此 称 X= 二 二 人 0(W1? 一 Te-k 是 方 
程 (8.3.3) 的 平稳 解 . 
由 (8.3.4) 式 可 知 ， XX 可 表 为 n 时 刻 (包括 ”时 刻 ) 之 前 的 噪声 &,&_1,.… , 的 线 
性 组 合 表示 . 苑 vk>1cov(Eyrxs Xn)=0, 即 6 上 X,Yn€2Z,k>1. 

下 面 我 们 来 看 一 看 X,, 的 概率 特性 ， 求 Xz 的 相关 函数 p(7). 注意 到 Eé&,X, = 07. 
在 方程 (8.3.3) 的 两 边 同 乘 以 X,,, 然后 取 数 学 期 望 ， 则 有 : 








D 


po(0)+mp()+oap(2) = 与 


同 理 ， 在 方程 (8.3.3) 的 两 边 同 乘 以 X,_,, (7 > 了 切 7 然 后 取 期 望 ， 则 : 


p(7)+ ap(7—1)+azp(7—2)=0 (8.3.5) 
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显然 ， (8.3.5) 式 的 一 般 解 为 : p(7) = eltd + e223. 
当 7=0 时 ，p(0)=1, 则 e1 二 es=1， (8.3.6a) 
当 ”>=1 时 ，pl1)+aap(0)+apll) =0 p() = 志和 = 将 半 , 故 : 








Ul 二 Uo 
es a . 8.3.6b 
C1U1 + E22 es ( ) 





由 (8.3.6a) 与 (8.3.6b) 可 解 得 : 


(1 — wu3)u (1 — ui)us 


el 一 CE2 二 
(&1 — uz)(1 + uu2) (ui — uz)(1 + unus) 








所 以 


EU A 二 jir+I 汪 
(4 ET U2 Ja (1 — wi)ust] (r>0) 


当 7<0 时 ， p(7) = p( 一 7). 
注 : 当 如 =us= 易 知 (8.3.3a) | cinun 十 cauY. 





Xn 十 41Xn-_1 十 SE pA a (8.3.7) 


的 平稳 解 . 系数 多 项 式 为 : alz)=1+arz 十 a2 十 十 apz?,f(z) 三 加 十 az 十 :十 
ap-1Z 十 ap. 设 f(z) 的 p 个 根 为 wi,1 <i<p,lui| <1( 且 不 妨 设 两 两 不 相等 ), 则 相应 的 B 
算 子 多 项 式 为 a(B) = T+a1B+azB? 十 .…+apB? = (I 一 uB)…(I 一 wyB), 于 是 (8.3.7) 
式 化 为 a(B)X, =, 帮 X= a 人 tn 将 a-1(B) pih 可 有 : 








则 : 


-De a 


二 


了 d; 
Xn = DB 名 


2 





也 就 是 说 AR(p) 中 的 XX, 是 {&%,n e 2Z} 在 n 时 刻 及 之 前 的 噪声 的 线性 组 合 , 故 : Vk>1 
cov(én+n; Kn) = 0,. Wm én LX vn EZ,k>1. 
与 求 AR(2) 的 相关 系数 类 似 ， 可 得 : 


ox =0°/[p(0) + a1p(1)+ :+ app(p)], (8.3.8) 
276 


(8.3.9) 的 一 般 解 为 : 
p(7) 二 e141 十 Ee2U3 十 … 十 epuy. (8.3.10) 
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而 为 了 确定 待定 系数 (e1,… ,ep) 可 由 下 列 条 件 : 








P(0)=1 
p(1)+ap(0)+.+app(p—1)=0 
Pl2)+ap(l)+ .+app(p—2)=0 
p(P—1)+app—2)+.+arp(l)=0 


求 出 p(0),… ,pl(p 一 1), 代入 (8.3.10) 即 可 得 


el 十 ez 十 … 十 ep 三 1 
elt1 十 ez2t2 十 .… 十 eptp = p(1) 


el 好 十 ez 十 :十 ep 克 = p(2) (8.3.11) 
ent! 十 ea 十 .十 eplib™! = p(p—1) 


解 上 述 方程 组 即 可 求 得 (e1,.… ,ep), 从 而 求 出 形 如 (8.3.10) 的 p(7) 
3. 平均 滑动 和 模型 MA(d) 
设 二 阶 矩 过 程 {Xn,n € 2} 满足 : 


Xn = boén 十 pcn_1 十 :… 十 pc， (8.3.12) 


其 中 bo,… ,04 为 常数 ， 则 (8.3.12) 的 平稳 解 称 为 4 阶 平均 滑动 和 模型 . 


令 B(B)= ho0B', 则 X=B(B)&n, 得 6 =B-1(B)Xn. 即 & 可 由 Xn, 和 1 
的 线性 组 合 表示 


显然 ， 当 |r| > g 时 ， R(7) = 0， 





oz) =0; 当 Ir| <g 时 ， 不 妨 先 设 0<+<g, 则 有 : 


gd g 全 gd 
R(7) = E(Xn Xn+r) = BIO 大 人 (>》 Déntr-i)] = 》 加 和 + = > PRDR-r. 
k=0 4 三 让 k=0 k=r 


p(7) = lg 
Dc Drbr-lrl/ Dhcon lr|<g 
4. 自 回归 滑动 和 模型 (过 程 ),ARMA(p,g) 
设 二 阶 矩 过 程 {X,,n € 2} 满足 : 








并 站 十 而 六 和 十 二 人 boén 十 Dién-1 ee 0 
则 上 述 方程 的 平稳 解 称 为 ARMA(p， 
令 a(z) = i axrz*, (ao = 0)， 


a(B)X 土 B(B)é,, 故 ， Xn 二 QT 0 


(8.3.13) 


= ob1z1， 则 (8.3.13) 的 算 子 表示 式 为 : 
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设 al(z) 在 |z| < 1 为 解析 的 ， 即 a(z) 的 根 在 单位 圆 外 ， 则 (8.3.13) 式 有 平稳 解 . 当 
7 之 max(p,g 十 1) 时 ， 可 得 : 





p(7) | aip(7 1) -4 app(r p) 二 0. (8.3.14) 


上 式 的 一 般 解 为 : 
P(7) = e1ui + epuy. (8.3.15) 
在 (8.3.13) 的 两 边 分 别 乘 以 名 -,"(0<r<D) 可 求 出 (X51); 在 (8.3.13) 的 两 边 分 
别 乘 以 外 ,_(0 < 7 <p) 可 求 出 p(1),… ,plp 一 1) 及 p(0)=1. 把 它们 代入 (8.3.15) 即 可 
求 出 待定 系数 (e1,… ,e,). 
5. 一 般 线 性 过 程 (The General Linear Processes) 
定义 若 平 稳 过 程 {X,,n ee 2 满足: 


Ce 


Xn = >》 green (8.3.16) 
天 三 
其 中 昌 
ee (8.3.17a) 
= DS gnzr. (8.3.17b) 


在 |z| < 1 上 解析 ， 则 称 X, 是 一 般 线性 过 程 . 
上 述 定 义 中 ， (8.3.17a) 保证 了 X, 的 存在 性 ， (8.3.175) 保证 了 X 是 平稳 的 ， 类似 
于 MA(g), 可 得 X 的 相关 系数 : 
Di OI 天 
D098 
显然 ， 当 gi = 必 , (al < 1) 时 ， (8.3.16) 化 为 AR(1) 模型 ; 
当 g; = 人 二 Qj 关 tz,ui| < 1) 时 ，(8.3.16) 化 为 AR(2) 模型 ， 
二 让 (0<k<aq) 
0 (k>g) 
因此 ， {gi,k > 0} 刻 划 了 系统 的 基本 特性 ， 它 又 被 称 为 格林 响应 函数 (Green’s Func- 
tion). 
6. 连续 参数 AR(p) 模型 
这 里 只 讨论 一 阶 与 二 阶 的 简单 模型 . 
(1) 连续 参数 AR(1): 设 二 阶 窍 过 程 478(),t+ € R} 是 满足 下 列 方程 的 平稳 解 ， 
dB(t) 
dt 


p(7)= 





时 ， (8.3.16) 化 为 MA(g) 模型 . 





X(t) + aX(t) = (8.3.18) 
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其 中 : a > 0.(B(t),t € R) 是 标准 B.M, { 写 内 ,t € R} 是 其 形式 导数 . 则 {X(t),te R} 是 
连续 参数 AR(1) 过 程 . 

由 第 七 章 可 知 : dX(t) 二 aX(t)dt = dB(t) 的 平稳 解 是 : X(t) = J etaB(u). 
与 之 比较 ， 我 们 引入 微分 算 子 D. 即 DX(t) = XX'(#), 则 (8.3.18) 可 化 为 : 


(D+aT)X(t) = TO 





由 此 可 得 : ; 
Es 1 dB(t) 一 Qt 一 2 ) , 
X(t) = Tia pr | dB(u). 


(2) 连续 参数 AR(2):{X(),t &€ R} 是 二 阶 矩 过 程 ， 且 是 满足 下 列 方程 的 平稳 解 : 


XH) + a (t) + a X(t) = 2 (8.3.19) 





设 a(z)=2 二 arz+as = (z+u)(z+ ua), ui Fa > 0, Na(D)= (D+uT)( D+ ul), 
故 : 








皇 加 加 1 1 1 
a (D+uI)(D+ul) uo— ul (二 二 DD) 
类 似 于 (1), 利用 D 算 子 ， 可 得 (8.3.19) 的 平稳 解 为 : 
1 


U2 — Ul 


X(W) = 





t 
2. (et) ealt WaB(u). 
一 oO 


$ 8.4 平稳 过 程 的 谱 分 解 和 协 方 差 函 数 (相关 函数 ) 的 谱 分 解 


在 第 一 节 中 所 举 出 的 例 2(3) 中 我 们 看 到 ， 一 个 由 不 同 角 频率 的 随机 振幅 互 不 相关 的 
随机 简 谐 运动 的 县 加 构成 的 随机 序列 是 宽 平稳 过 程 ， 那么 是 否 任 一 个 宽 平 稳 过 程 (或 序 
列 ) 都 可 以 分 解 为 由 角 频 率 互 不 相同 ， 相 应 的 随机 振幅 互 不 相关 的 随机 简 谐 运 动 的 线性 
全 加 呢 ? 其 协 方差 函数 是 否 也 可 以 写成 8.1 中 例 2(3) 的 协 方差 函数 的 类 似 形 式 呢 ? 答 


案 是 肯定 的 . 
为 了 从 直观 上 理解 随机 过 程 谱 分 解 的 意义 ， 我 们 先 介 绍 正 交 增 基 过 程 及 关于 正 交 增 
景 过 程 的 均 方 积 分 的 概念 


1. 正 交 增 基 过 程 
定义 ” 称 随 机 过 程 {€( 和 A), 和 € (oo, 十 %)} 为 正 交 增 景 过 程 ， 若 它 满足 : 
1)VA1 < M2, E(E(N2) 一 (AD) = 0 
2)VAL < A2 < A3 < BfC(0a) -£1)) (5 一 5(s))} = 0 (不 重 县 区 间 上 的 增 
量 相 互 正 交 (不 相关 )). 
3){E( 和 A), 和 AE (一 cc, 十 0)} 均 方 右 连续 ， 即 : lims_ot (和 和 +h) = (A), (1m.s.) 
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tn ) = 0, 吾 (二 seo) < x. 
记 CG(A) = ElE(A a 入 ) 均 方 右 连续 可 知 G(A) 右 连 续 . 又 Yi < M2， B(E(X2)E(N1)) = 
El(£(A2) 一 0 十 0 Eo = 也 AP = GO 故 G(X2) = BlE(N2)]? = Blé(Ns) — 


(A1) + (DP > GO1). T GOA) 为 单调 不 演 函 数 ， 

若 记 F(A) = GO)/G(+%), 则 0=F(-%) < F(A) < F(+%)=1, 且 F( 和 ) 也 为 单调 
不 减 右 连 续 函 数 . 故 F() 可 以 看 作 是 一 个 定义 在 (一 ~x, 十 %) 上 的 分 布 函数 . 显然 ， 独立 
增 量 过 程 都 是 正 交 增 基 过 程 ， 如 Poisson 过 程 ， B.M. 等 . 

与 116 积分 有 些 类 似 ， 我 们 可 以 定义 一 种 关于 正 交 增 量 过 程 的 RR 一 S 积分 . 

设 f(A,t) 是 (Ab 的 二 元 函数 ， 和 € (2%,+oc),t ETYa,D| C(-%,+%) 及 a = 
MXO<AM< <AXNI<A< :<An = 6, 任 取 wr Ei NM], 记 AM = Mo M16 = 
maxy AM, Aéx = 一 st- 若 





nn 


申 之 fur)Aér = Taalf) (1m.s.) 


存在 ， ， f(z) 关 于 {E( 和 ), 和 AE(--%,+%)} 在 [a,9 中 上 的 有 R-5 均 方 积 分 , 记 作 
下 (Ch = J 了 Od 和). 同样 , 记 广 义 积分 三 > 了 Od) 全 lim os fdE(A). 

， 友 2 = V-1), 则 人 etxtde(A) 可 看 作 是 角 频 率 不 同 ， 对 应 的 随机 振 
幅 不 相关 的 简 谐 运动 的 琶 加 ， 其 中 每 一 个 分 量 为 ert**Ati = (cos upt 二 isin wnt)Aéy. 

注 : /eXde(M) ES fo cos Mae(A) + i sin Mde(N). 

若 令 基 (t) = /eit2qe( 和 ), 则 {X(t),tE (-x,+%)} 在 t 时刻 的 状态 基 (t) 是 由 角 
频率 不 同 ， 对 应 i 下 面 我 们 来 证 明 这 样 的 过 
程 必 是 宽 平稳 过 程 . 

显然 BX(t) = 0, 对 VA 和 ee 和 A1 < 和 2). 一 定 可 以 取 到 充分 小 的 hi, hz > 
0st < M+hi < MN < M+ ha 记 AEONi) = £0 de ) 一 200),i 二 1,2, 则 AtO) 互 不 
相关 ， 即 B(A&(A1)AE(X3)) = 0, 于 是 由 Fubini 定理 有 


to pio 
Rtnt)= EX 7D)= | eilttr ei p(ae( MAE) 


因 ， 当 Xi = 和 9 时， BB(dE(M RN)) = dG(N1), 时 ， (ds(A1)qdt(Xs)) =0 故 
R(t 十 7.) 二 +X eir34G(A) 仅 与 7 有关， 所 以 {X(t),tE (oc, 二 oo)} 是 宽 平 稳 过 程 . 

记 R(T) = R(t+7Tt) = [> ei NdG(N), J RO) = eo 因此 ， 分 布 函数 F(A) = 

(4)/G(+~x) 的 物理 意义 有 如 下 解释 : 若 Ae(^) 是 角 频 率 为 和 的 电流 (或 电压 ), 则 G(+cc) = 

召 (+oo)|? 表示 信号 平均 总 功率 ，dF() = dG(N/G(+sc) 表示 角 频 率 为 的 电流 (或 电 
压 ) 信号 的 平均 功率 在 总 功率 中 所 占 的 比例 . 于是， 通常 我 们 把 (和) 或 G(A) 称 作为 功 
率 谱 函数 (功率 谱 分 布 )， 

同样 的 ， p(7) = R(T)/R(0) = /3 ersdF(A) (或 Rr) = 万 > ersdG(N)) 表示 了 相 
关 函 数 (或 协 方差 函数 ) 的 功率 谱 分 解 . 
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以 上 我 们 证 明了 由 角 频 率 不 同 ， 对 应 的 随机 振幅 不 相关 的 随机 简 谐 运动 倒 加 而 成 的 
随机 过 程 一 定 是 宽 平 稳 的 ， 那 么 反 过 来 是 否 成 立 呢 ? 即 是 否 所 有 平稳 过 程 及 其 相关 函数 
都 可 以 作 这 样 的 谱 分 解 呢 ? 以 下 的 内 容 将 说 明 这 种 谱 分 解 是 平稳 过 程 的 共性 . 

2. 相关 函数 (或 协 方差 函数 ) 的 谱 分 解 

相关 函数 之 所 以 能 够 进行 谱 分解 ， 是 因为 它 具 有 非 负 定 性 . 为 了 说 明 这 一 点 ， 我 们 
先 引述 数学 分 析 中 的 两 个 定理 . 

定理 8.4.1 Bochner- Khintchine 定理 

设 Rr) 是 7 E (-%,+%) 的 连续 函数 ， 则 它 是 非 负 定 函 数 的 充 要 条 件 是 存在 一 
个 分 布 函数 FO)(X € (-o0,+o0),F(-o0) = 0,F(+%) = D, 对 wyr < 下 满 足 有 8 = 
用 erxdF(N). 而 且 这 种 表示 式 是 唯一 的 ， 

对 于 离散 的 情形 ， 有 类 似 的 结果 ， 表 述 如 下 : 

定理 8.4.2 Herglotz’s 定理 

设 {Cw,n € 21} 是 一 个 序列 ， 它 是 非 负 定 的 序列 的 充 要 条 件 是 存在 一 个 分 布 函 数 
F(A EAR), F(R) = 0,F(+7) =1), 对 vne2 满足 S J einMdF(A). 

以 上 两 定理 的 证 明 从 上 略 ， 有 兴趣 的 读者 可 参看 [5,20]. 

在 第 一 节 中 ， 我 们 已 经 说 过 相关 函数 p(.) 是 非 负 定 的 ， 因 此 ， 我 们 有 以 下 定理 : 

定理 8.4.3 ” 设 p(7) 为 平稳 序列 {X,,n E 2 的 相关 函数 ， 则 有 如 下 表示 : 











十 区 
p(7) = / eMaF(M) (8.4.1) 


其 中 F(A) 是 [-7,7] 上 的 分 布 函数 ， 称 F(A) 为 p(7) 的 功率 谱 函 数 . 
着 元 为 实 rv, 则 : ， 
p(7)= a cosrAdF'(A) (8.4.2) 
0 


若 p(7) 满足 : 并 ,zjplrj| < x,; 则 F(X)= 了 (A) 存在, 县: 


全 
FA = 一 》 plr)jer (8.4.3) 


7 二 一 Co 


+ 
mn)= | eMfF(A)AA (8.4.4) 


此 时 p(7) 与 f(A) 可 看 作 是 互 为 F- 变换 及 其 逆 变 换 . 
定理 8.4.4” 设 p(7) 是 均 方 连续 的 平稳 过 程 Xr = {X(t),t < (-x,+%)} 的 相关 函 
数 ， 则 p(7) 可 表示 为 : 
+2o 
p(T) = 人 erAdF(》) (8.4.5) 


其 中 F(A) 是 和 ERR 上 的 分 布 函 数 ， 称 F(^) 为 p(7) 的 功率 谱 函 数 . 
二 A 281 
若 Xr 为 实 r.v., 则 : Mk 
2/ cos TAdF (A) (8.4.6) 
0 


p(7) 
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若 p(7) 满足 : 7X lolrjldr < se, 则 F(A) = f( 和 ) 存在 ， 称 f(^) 是 功率 谱 密度 函 
数 ， 且 : 
f(A)= 下 ce rp(T)dr (8.4.7) 


十 
p(T) = / e'™ f(A (8.4.8) 


(8.4.7).(8.4.8) 可 看 作 是 连续 参数 情形 下 的 F- 变换 及 其 道 变换 . 

定理 8.4.3,8.4.4 所 阐述 的 平稳 序列 (过 程 ) 的 基本 特性 , 最 初 是 由 N.Wiener 及 A.Khintchine 
得 到 的 ， 因 此 通常 称 为 Wiener- Khintchine 定理 . 

例 1 设 {tn,ne 2} 为 日 噪声 ( 见 § 8.1 例 ), 则 


要 1 0 
plr) = | 5 pl < ea 


0 rz 0 7rEZ 


故 f(A) = 已 (A) 存在 ， 且 易 得 : 


亦 即 白 噪声 的 谱 密 度 为 常数 ， 这 个 性 质 与 光学 中 的 白光 的 性 质 相 同 ， 这 就 是 ” 白 噪 声 “名 
称 的 由 来 . 这 个 性 质 说 明了 白 噪声 是 角 频 率 在 [-r,z] 上 均匀 分 布 的 不 相关 的 随机 简 谐 运 
动 倒 加 而 成 的 ， 即 其 不 同 频率 的 平均 功率 是 均匀 的 . 

例 2 AR(1) 模型 

由 上 一 节 知道 p(7) =al"l， ”la| < 1, 则 有 : 


BD ol = 3 lol- +1+ hl < +t 


了 二 一 Co 7 了 一 一 Co 





本 {tS 1 1—a? 
NT Rs —iAr -iArj7)— 到 
(2) oe a ”> p 2x 1 一 2acos 入 十 dz 


9 一 一 2 





例 3 随机 信号 (图 象 ， 数 据 等 ) 的 传送 

在 信号 传输 中 ， 信 和 号 是 由 不 同 的 电流 符号 表示 的 ， 电 流 的 发 送 时 间 又 有 随机 的 持续 
时 间 . 2 代表 上 时刻 的 电流 , 且 {X(t),t € R} 是 平稳 过 程 ，P(X(t)=1)= P(X(t) = 
—1) t) 在 任 一 区 间 (t,t 十 及 内 发 生 跳 变 的 次 数 是 一 个 简单 Poisson 流 ， 即 令 : 


= inf{t:t >2820, X(t) FX(—00)} 


i n>1,vt>0 
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RE sup{n* 7 < 
则 有 : vi>0,h>0 
PUT 月 -NG = = 


对 YtE (一 20, 十 20), 易 知 BX(t) = 二 0.- 故 R(t 二 Tt) = 二 B(X(t+7)X(t)) >0 而 : 


+20 
(X(t+7) Xt) =1)= Nt+7r)— NG) = 2k) 
0 
+30 
(X(t FTIK)= -1)= Nt+t7r)— Nt) = 2k+1) 
由 三 避 








— (wr) —uT . (wr) st —uT —2ur 
Mi ot ,np ye 


又 因为 Xz 为 实 tv 芍 p(-7) = p(7), 有 : plr)= can re 所 以 Xz 是 宽 下 稳 


1 ft” _ ， 
1= 冯 人 epomar= 


例 4 连续 参数 AR(1) 模型 ， 见 (8.3.18) 
由 上 一 节 已 得 X(t) = J e-4(t-WqB(lw), 故 BX(t)=0, 且 Yr>0 有 : 





t 十 7 了 t | 
E(X(t + 7T)X(t)) =5/ crroaa( 上 et- aqB(v) 


t t+r | 和 
3 / er tr We EdaB(u)dB()) 
t 一 GT 





€ 
er eg (rz) 
aS 2a 


故 对 Yr E R, 有 R(T) = 去 e-"l"1, 由 此 得 : 





A 
同 例 3, 可 知 (和) = a 
例 5 设 
2 十 4 
1 = 3 T1000) 
求 p(7). 
i 283 


于 ee 


这 / airA f(AA = 记 (9el" 平 5e-3lr|) 


一 Ce 


8.4 平稳 过 程 的 谱 分 解 和 协 方差 函数 (相关 函数 ) 的 谱 分 解 


3. 平稳 过 程 的 谱 分 解 
谱 分 解 是 平稳 过 程 (序列 ) 的 共同 特性 .对 于 离散 参数 的 平稳 序列 ， 我 们 有 以 下 的 定 
理 具 体 阐 述 这 一 特性 . 
定理 8.4.5 ” 设 XX, = {Xn,n € 2} 为 宽 平稳 序列 ， EX = 0,R(7) = B(Xntr Xn), 
Pp(7) = 有 R(7)/R(0),7 € 2Z. 则 一 定 存在 一 个 正 交 增 量 过 程 {£( 和 ), 入 € [7, 7]}, 满足 : 
= [ e'™ Mae (A) (8.4.9) 


WW 


且 : 
Pom=Ro 1/ erAdRF(A) (8.4.10) 


其 中 ， 
1) EO)=HXo- Dgo rm Xn} 和 AE[-mq， BEX)=0. 
2) F(A) = BlEO)P/BIE(A)P AE [7,7] 为 和 的 相关 函数 p(7) 的 功率 谱 分 布 


F(A2) — F(A) = ElE(M2) — ED/ERM YY-r<M<M<” 


即 任 一 个 宽 平 稳 序列 可 分 解 为 角 频 率 在 [-r,r] 上 ， 且 角 频 率 互 不 相同 ， 对 应 的 随机 振幅 
互 不 相关 的 一 系列 随机 简 谐 运动 的 释 加 . 

对 于 连续 参数 的 平稳 过 程 ， 则 有 : 

定理 8.4.6 设 Xr = {XX(),t € (coc, 十 %o)} 为 宽 平稳 过 程 且 均 方 连续 ， EX(t) = 
0,R(T) = (X(t 十 TX()),p(7) = R(T)/R(0), 则 必 存 在 一 个 正 交 增 量 过 程 {8(N), 和 E 
(一 ,2%)}, 满足 : 


十 oo 
X(t) = | exde(A) (8.4.11) 


且 : 
R(T) =R0) / ei NaF(A) (8.4.12) 


其 中 ， 
1) EO) EE limr wf X(t)d ME (0,+%) 
2) F(A)= EOP/EIE(+O. 


2 


F(A2) — F(A) = ElE(M2) — EVN /ElE(+) 


F(A) 称 作 Xz 的 相关 函数 p(7) 的 功率 谱 分 布 ， 这 说 明 ， 对 平稳 过 程 (序列 ) 均 可 看 作 是 
随机 简 谐 运动 (不 同 角 频率 对 应 的 随机 振幅 不 相关 ) 的 又 加 . 

上 述 定理 的 证 明 见 参考 书 [6,15] , 这 里 从 略 . 

定理 8.4.5,8.4.6 不 仅 指 出 了 宽 平 稳 过 竹 的 谱 分 解 的 必然 存在 性 ， 同 时 指出 了 这 种 分 
解 是 唯一 依赖 于 平稳 过 程 本 身 的 . 


VA1 < A2 
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$ 8.5 ”最 佳 均 方 预 测 与 最 佳 线性 均 方 预测 


1. 最 佳 均 方 预测 

预测 所 要 解决 的 问题 是 ， 已 知 一 个 时 间 序 列 现在 与 过 去 的 数值 XI, X2，…… ,X, 对 将 
来 的 数据 Xx,( > 1) 进行 估计 和 预测 .下面 我 们 给 出 最 佳 均 方 预测 的 一 般 数 学 表述 . 

设 有 一 可 观测 的 随机 序列 Xr = {X,n Ee N}( 有 限 或 无 限 均 可 ), 及 一 个 随机 变量 
Y, 着 用 Xi1, 革 2,… ,XX 的 某 个 函数 f(X1,X2,… ,XX ) 作为 了 的 预测 (估计 ). 记 作 了 = 
FE ,To ,Xn), 其 误差 为 (Y 一 了 了)， 我 们 能 得 到 在 由 1, 久 2,… ,XX 给 出 了 的 估计 
(或 预测 ) 中 的 最 佳 均 方 预测 了 * 满足 : 


ElY — YY?“ = if ElY — f(Xi1, Ko, , Xa) 





即 在 所 有 X1, XX2,… ,Xn 的 函数 中 ， 寻 找 一 个 使 均 方 预测 误差 达到 最 小 的 预测 (或 佑 
计 )Y*. 

根据 定义 ， 我 们 有 以 下 的 定理 . 

定理 8.5.1 若 BE(Y|X1, Xo,.. ,nm) 存在 ， 则 取 YF* E(Y|X1, Xo,... , Xn), 


ElY pe BE(Y|X1, X», 人 5 三 mE f(X1, X»,: i eG 


证 : Vf(X1,… ,Xn), 有 
ElY— f(X1,:: , Xn)| = EI(Y ~ E(Y|X1,::: , Xn) + E(Y|X1,:: , Xn) — F(X1, , Xa) 
= ElY — E(Y|X1, Xo , Xn)| + EIE(Y|X1,: ,Xn) — f(X1, ,Xn)| 
+ 2E[E(Y|X1,.:: ,Xn) — f(X1, ,Xi)Y — E(Y|X1, Xs,... ,X,)] 
> ElY ~ E(Y|Xi1., X2,... ,Xn)| + 
2E{[E(Y|X1,... ,Xn) — f(X1,: ,Xn)]lY — E(Y|X1, X2,:.. ,Xn)]} 


下 面 证明 上 式 第 二 项 为 0. 由 条 件数 学 期 望 的 性 质 ， 有 : 


E{[E(Y|X1,.:: in) oe f(X1,.. , Xn )][Y — E(Y|X1. X2,... , Xn)]} 

一 E{BEI(E(Y|X1,.:: ,全 JJ X1T ,Xn))(Y — E(Y|X1, X2,... , Xn))|X1,: ,Xn]} 

= 页 (再 (也 | 天, 和) — F(X1s: , Kn) (BY IX Xa, , Xi) — BE(Y|X1, X23,.. ,Xi))] 
=0 


故 : BIlY — f(Xi, Xa, , Xn) > BIY — E(Y|X1, Xa ,Xn)l?, vf 
例 1 若 (X,Y)~ NU p202, cap 着 已 知 六 预测 Y, 则 由 正 态 过 程 的 性 质 及 以 
上 定理 有 : 
六 = BYIX) = pa + p(X -a) 
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例 2 AR(1) 模型 
设 & ~ N(0， 5 ) 为 正 态 白 噪声 ， {Xn.n € 2} 满足 一 aX 1 = &, 
1) 用 已 和 -1 预测 X41 求 训 1 


因 &, 为 正 态 白 噪声 ， 故 {&%,n € 2} 相互 独立 ， 且 el 与 XXn-1,… 独 
立 ， 再 由 X41 一 4Xn = knt1 得 : BB(Xnti|Xn, Xp) 一 (人 | Kn-1,..) = 
(GZ Xn_1) = 0, 即 对: j= 忆 (Xnti|Xn,Xn-1,…) = aXn. 而 其 最 佳 均 方 误 
差 为 : BIXnti 一 X= EB(Xnti aX)? = EE?2i = 


2) 用 二 预测 Xntm(m 步 预 浏 ， m= 1), 求 最 佳 均 方 预测 Ge 


在 方程 Xtm 人 aXntm-_1 Entm 两 边 对 (Xn ， Xn_1, 和 ) 取 条 件数 学 期 望 ， 并 注意 
到 En+1 与 Xn Xn 独立 ， 有 BE(RKy pm ln Rl )—aE(Xntm_i|Xn, Xn-1, …) 三 
0, 即 ， BE(Xntm|Xn, Xn-1, A ) = aB(Xnt+m-_1|Xn, Xn_1) 人 )， 依次 递 推 可 得 : 


BE(Xnim|Xn, Xn_1, 三 ”二 有 二 局 


其 均 方 误差 为 : 


Hnti+m 二 可 | 是 0 直击 = dr Xl = Eléntm 十 UEntm—1 下 am 一 LEI? 


2m 


; 21—( 
7 ed 





J 
1 一 02 lal'< 


显然 , m 步 预 测 误差 随 m 的 增 大 会 增 大 .而 且 我 们 可 以 看 到 ,对 AR(1) 模型 ,用 XX,, XX _1,…: 
预测 了 X*，,, 与 用 X, 预测 全; ，,, 的 效果 是 一 样 的 . 

2. 线性 均 方 最 佳 预测 

用 Y 关于 X,,X,-_1,… 的 条 件数 学 期 望 B(Y|X,,X,_1,… ) 作为 了 的 最 佳 均 方 预 
测 . 在 理论 上 是 一 个 很 漂亮 的 结果 ( 见 定理 8.5.1). 但 是 在 很 多 实际 情况 下 ， 准 确 求 出 其 条 
件数 学 期 望 往往 是 相当 困难 的 ， 甚 至 有 时 根本 无 法 求 出 . 于 是 , 我 们 只 能 退 而 求 其 次 . 一 
个 很 自然 的 想法 便 是 放弃 在 一 切 函 数 范围 内 寻找 最 优 的 目标 ， 而 只 限制 在 线性 函数 的 范 
围 内 求 最 佳 均 方 预测 (估计 ). 这 就 是 下 面 要 讨论 的 线性 均 方 预测 问题 . 其 确切 叙述 如 下 : 

设 {Xn,Xn-1,… ,} EE 五 空间 , H, = {Xn,Xn-1,… 的 线性 组 合 及 其 均 方 极限 爹 体 }， 
称 五, 为 由 XX,,X,-1,.… 张 成 的 线性 空间 . 

若 对 于 六 = Po E Hn, 满足 VY EH 有 


BlY-YP<BY-Yl 或 286BlIY -Y= oi ElY —Y| (8.5.1) 


则 称 了 * 是 了 的 线性 均 方 最 佳 预测 . 
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可 见 ， 线 性 均 方 最 佳 预 测 是 以 牺牲 一 定 程度 的 预测 精度 ， 来 换 得 预测 的 可 操作 性 . 
下 面 我 们 可 以 深入 考察 这 种 预测 的 结果 . 
等 式 8.5.1 表明 了 * 满足 : 


dY.Y*)= inf d(Y.Y) (8.5.2) 
YEeH, 


即 要 求 上 -了 "|| = d(Y,*) 是 Y 到 超 平面 瓦 , 的 最 短 距离 ， 故 其 几何 表示 如 下 图 所 示 


显然 ， 了 * 满足 (8.5.1) 的 充 要 条 件 是 : 了 * 满足 
(Y —Y*)1H, (8.5.3) 


即 Y* 是 Y 在 五 ,上 的 投影 . 又 因 VuveE H， wlv (wo)=0, 故 ，(Y 一 了 ")1H， 
的 充 要 条 件 是 : vu < 玉 ,, 满足 : 


(YY,u)= EY -YY*)d]=0 (8.5.4) 


即 满足 (8.5.4) 的 了 * 是 了 在 H, 上 的 线性 均 方 最 佳 预测 . 
定理 8.5.2 设 {Y, Xn Xn_1, ee ,} E H 空间 ， H,, 为 由 大 mn， Xl es 张 成 的 线性 空 
间 . 则 了 "是 Y 在 也 上 的 线性 均 方 最 佳 预测 的 充 要 条 件 是 ， Yu € 如, 满足 : 


BI(Y ~Y")] =0 


记 作 Y 了 * = Pp,Y. 
(1) 宽 平 稳 过 程 的 线性 均 方 预测 
设 {Xn,n E 2Z} 是 实 宽 平 稳 过 程 ， 其 协 方差 函数 ， 相 关 函 数 分 别 为 : {Rr),r € 
2Z},{p(7),7 二 2 上 已 知 Kn, Kn-1, Xn-_p, 试 求 Xn+t1 的 线性 均 方 最 佳 预测 
可 令 站 1 = oa 由 (8.5.4) 得 VXi,1=n,n 一 1,…,n 一 p 有 : 
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p 
Bl((Xairi— arXn x)X)=0 n-p<l<n (8.5.5) 
k=0 








8.5 ”最 佳 均 方 预测 与 最 佳 线性 均 方 预测 





亦 即 
oR(0) + oR(1) + a R(2) + + op R(p) = R(1) 
QoR(1) + oi RO) + eR) + + op Rp— 1)= R(2) 
. (8.5.6) 
roR(p) + a Rp— 1)+aRp—2)+.+ap RO0) = Rp+1) 
其 向 量 形式 为 : 
RO0) RD … RD) ao R(1) 
R11) RO) 1 RP-—1) ad R(2) 
. : | : 2 . 川 三 (8.5.7) 
Rp) RP—1) R(0) Qp R(p+1) 


(8.5.7) 称 为 Yule-Walker 等 式 ， 左 边 的 矩阵 称 为 Toeplilz 矩阵 . 解 (8.5.6) 的 方程 组 ， 求 
得 : a = (Qo,Q1… ,9p), 代入 站 11 二 50o QnXn-_x, 即 得 到 X41 的 线性 均 方 最 佳 预 
测 、 

(2) AR(p) 模型 的 线性 均 方 最 佳 预测 

设 Xr ={XnE2G 满足 : 





p 
>》 ,ok 三 (8.5.8) 
k=0 


其 中 ，ao = 1,& = {5&1,n€ 2} 为 白 曲 声 ， 且 (aj,k ==1,2,…,p) 满足 a(z) = ?oa 
的 根 在 单位 圆 内 .已 知 XX,,X,_1,…, 求 X,+1 的 线性 均 方 最 佳 预测 ,1. 

记 五 ,(X), Ha(&) 分 别 为 由 XXn_1,… 入 ,6-1,… 张 成 的 线性 空间 , 因 X， = 
nts € Ha(8), 故 五 (X) C Hn(&), 而 由 (8.5.8) 知 ，é& € Ha(X), 即 H,(€) C 
Hn(X). 故 有 : Hs(X)= H(é). 


且 由 白 噪声 的 特点 ， 有 vk 之 Laid (X), 又 因 Xn+1 er > OK Knt1k 十 cn+l1， 故 : 


R; 1 = Pi, Knti = Pa,(— 》 中古 RE) 十 Ps(en+1) 
天 三 出 


也 
= >》 ok 十 0 三 一 (al1 和 Xu 十 aoXn-1 十 .十 do 有 n+1-D) 
k=1 
(8.5.9) 
(3) 二 阶 矩 过 程 中 的 线性 均 方 最 佳 预测 
设 二 阶 矩 过 程 Xzr = {X,n € 2Z} 满足 : EX, = 0.R(n,m) = B(X,Xmn), 已 知 
庆 , .X41..… ,Xp, 求 +1 的 线性 均 方 最 佳 预测 ;1 
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设 名 " 1 = ?_o anXn_w, 则 由 前 述 分 析 易 得 : 


2 
(Co 一 DorXn-t) Xl)=0 n-p<l<n 








ks 
展开 即 : 
QoR(n.n) 十 oR(n om1n)+ + op Rn op.n)= Rn+1,n) 
goR(n.n om1)+aRn oln om1)+ +aRn pn-1)= Rn+1,no1) 
aoR(n.n p+aRn a1no p+ +apRn pn—p)= RNt+1,n—p) 














解 出 a = (ao,ai,…… ,Gp), 即 可 求 得 Re 
$ 8.6 各 态 历经 性 (或 遍历 性 ) 


pe sok 7j,p(7) 等 通常 并 不 是 已 知 的 ， 那 么 ， 如 何 通 过 试验 得 到 它 
们 的 估计 元 (), RE(7), 最 简单 自然 的 方法 莫 过 于 通过 多 次 重复 试验 得 到 多 个 样本 
函数 ， ne 然而 ,对 于 平稳 过 程 ， 通常 是 采 
取 另 一 方法 作为 估计 . 

首先 ， 我 们 来 回忆 强大 数 定律 : 设 {X,,n>1}iid. 且 BEX, =A< ~, 则 : 


即 当 nn 充分 大 时 ， 


这 说 明 , 独立 同 分 布 序列 按时 间 平 均 以 概率 1 收敛 到 按 统计 平均 . 那么 , 平稳 过 程 (序列 ) 
是 否 有 类 似 的 结果 呢 ? 答案 是 肯定 的 . 

设 {了 (),t € R} 是 平稳 过 程 ， 则 X(t) 事实 上 是 (w,1) 的 二 元 函数 . 因此 它 可 以 有 按 
空间 (样本 ) 的 统计 性 质 (如 mx,R(7) 等 ), 也 有 在 te RR 上 的 时 间 平 均 .后 者 的 定义 叙述 
如 下 : 

阁 以 下 的 均 方 极限 存在 ， 则 


X(t) = S lim ol: X(t)at (m.s. 意 义 下 ) 


“1 
R(tt+7) Elm 3 XOX 7) TUTE 7) dt 
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称 为 X(t) 在 (->c,+se) 上 的 时 间 协 方差 函数 ， 
在 工程 技术 上 ， 测 基 到 很 多 个 样本 函数 通常 是 很 困难 的 ， 甚 至 是 不 可 能 的 ， 而 平稳 
过 程 的 统计 性 质 不 随时 间 推 移 而 改变 ， 因 此 ， 我 们 希望 得 到 : 


X(t) = mx .8. (8.6.1) 
R(t,t+7)= R(T) .8. (8.6.2) 


如 果 (8.6.1) 式 成 立 ， 则 称 X(t) 具有 数学 期 望 的 各 态 历经 性 ， 即 遍历 性 (Brgodic). 

如 果 (8.6.2) 式 成 立 ， 则 称 X(t) 具有 协 方差 函数 的 各 态 历 经 性 . 

应 该 指出 ， 并 不 是 所 有 的 平稳 过 程 都 具有 各 态 历经 性 . 只 有 对 过 程 本 身 加 上 一 定 的 
条 件 ， 才 能 使 它 共 有 各 态 历 经 性 . 这 就 是 后 面 各 态 历经 性 定理 要 解决 的 问题 .在 介绍 它 
们 之 前 ， 先 举 一 个 具有 各 态 历经 性 的 平稳 过 程 的 例子 . 

例 1 设 {X(t) = acos(wot + B),t ER), 其 中 ， 4,wo 是 正常 数 ， 而 B 为 区 间 [0. 27] 
上 的 均匀 分 布下 面 说 明 它 是 具有 各 态 历 经 性 的 . 易 知 : 


mx(t)= Elacos(wot + B)| = of cos(wot 十 dy 一 和 
0 


R(t.t+7)= EIX(t)X(t+7)]| = se cos woT 
即 X(t) 是 平稳 过 程 ， mx = 0, R(T7) = #0 COs woT. 而 : 


二 1 pT 
X(t)= lim 一 acos(wot+®)dt = Lm 一 [cos wot cos B—sin wot sin Badt = 0 = mex. 
了 一 cc 27 = 一 co > 一 下 


2 
瑟 作 去 二 全 记 ia 二 小 cos(wot + B)coslwolt + 7)+ Blat = zo coswoT = R(T) 


故 X(t) 具有 各 态 历 经 性 . 
下 面 我 们 就 来 讨论 为 了 具有 各 态 历 经 性 ， 一 个 平稳 过 程 需要 满足 什么 样 的 条 件 . 
定理 8.6.1 ”连续 参数 平稳 过 程 的 数学 期 望 的 各 态 历 经 性 定理 
设 {X 罗 -> <t<+%} ee 则 关 (t) = mx a.s. 的 充 要 条 件 是 : 





人/ =,0 (8.6.3) 


证 : ” 基 (t) 本 身 是 一 个 随机 变量 ， 因 此 我 们 可 以 得 到 : 


EX(t) = Bl lim 人 X(t)dt] = Nim 人 EX(t)dt = mx. 
DX(t) = E(X(t))* 一 coat, 2 本 lim 元 人 X(t jd 一 mm 


一 cc 2 了 


= Lim ja 本 3 LE. R(t — s)dsdt 
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由 变量 置换 和 R(7) 的 偶 函 数 性 质 ， 可 得 ， 三 fy R(t 一 s)dsdt =2 [> (27T 一 了)R(r)dr， 
故 : 


二 13 :A 到 
DX(t) = lim z/ -于 ji 到 (md 
"SO 0 


因此 ， X(t) = mx 二 > X(t) = BX(t) < 全 DX(t) = 0 < 二 (8.6.3) 式 成 立 . 
若 只 讨论 时 间 为 0 < t < x 的 平稳 过 程 ， 上 述 充 要 条 件 改 为 : 





了 一 cc 


i 3 J)ar =0 (8.6.4) 
二 未 1 .D. 


即 可 . 
推论 “看 平稳 过 程 Xz 满足 limr ,< R(T) = 0, 则 Xr 具有 数学 期 望 的 各 态 历经 性 . 
证 : 根据 极限 的 定义 知 : Ye>0,37 > 0, 当 rr> 人 时 |Rr)|<s, 故 


2 人 


1 7 本 局 
#/ -Rarsa/ Rar 


1 JT 让 过 了 
< 到 /mlar+ 到 人 Intmlr 
ih. 
1 /fT 





未 [R(T)dr 4 i Te T2780 
故 由 定理 (8.6.1) 可 以 得 到 结论. 

这 个 推论 给 出 了 平稳 过 程 具有 数学 期 望 各 态 历经 性 的 一 个 充分 条 件 . 它 说 明 ， 当 时 
间 间 隔 无 限 大 时 的 两 状态 不 相关 时 ， 平 稳 过 程 具 有 数学 期 望 各 态 历经 性 . 

定理 8.6.2 ”离散 参数 平稳 过 程 数学 期 望 的 各 态 历经 性 定理 

设 {Xmn 二 0,1,2.…} 是 平稳 序列 ， 则 : 





及 一 工 


lim 一 > Xi = mx Q.8. 
n=00N #0 


成 立 的 充 要 条 件 是 : | 
多 一 k 
lim 二》 (1— ~—)R(E)=0 (8.6.5) 
2 


证 明 类 似 于 定理 (8.6.1), 从 上 略 . 
定理 8.6.3 ”连续 参数 平稳 过 程 的 协 方差 函数 各 态 历经 性 定理 
设 {X(t),t € R} 是 平稳 过 程 , 且 对 任意 给 定 的 7.{X(t)X(t+7),t € R} 是 平稳 过 程 ， 
则 五 (t,t 十 7) = (7), a.s. 成 立 的 充 要 条 件 是 : 


i ; 
Bm z/ (1— [R(T (R'(7T))?]adni =0 (8.6.6) 


其 中 ， Ri(71) = BI[X(t)X(t + 7T)X(t +n)X(t+T+n),R(7T) = ELIX(t)X(t + 7)]. 


8.7 ”线性 系统 中 的 平稳 过 程 


证 : ” 当 7+ 固 定时 ，R'(7) = B[X()X(t+7)] 是 随机 过 程 {Y(t) 会 (WX(t+47),t€ R} 
的 数学 期 望 . 故 ，X(t Re ee Sr 
(YT € R) 

由 题 设 条件 ， 知 Yr € RR.{Y;(t),t € R} 是 平稳 过 程 . 又 : 


Cov(Yi(t), Y(t+n)) = Cov X(t X(t+7), X(t +n)X(t+r+n)) 
= E[X(t)X(t+7T)X(t+n)X(t+r+n)] 





— E[X(t)X(t+ 7)] EIX(t+n)(t+T+7n)] 
= E(n)— (R(T)) 


于 是 ， 由 定理 8.6.1, 可 得 结论 . 
若 只 讨论 时 间 为 0<t < ~ 的 平稳 过 程 ， 定 理 8.6.3 的 充 要 条 件 改 为 : 


T 
lm | 条 雪 [Rr(n) — (R(T))]dr =0 (8.6.7) 


即 可 . 
定理 8.6.3 ”离散 参数 平稳 序列 的 协 方 差 函数 各 态 历经 性 定理 
设 {X,n = 0,1,2.…} 是 平稳 序列 ， 且 对 任意 固定 的 非 负 整 数 mm,{ Xn 和 mm = 
0,1,2…} 是 平稳 序列 则 : 


n—1 
lim 一 i = R(m) a.8. 


成 立 的 充 要 条件 是 : 
J 1 D0 SE) — (Rm) =0 (8.6.) 
a 


其 中 ， 已 m (kK) = E(X, Kn tmnt ntmtk),R(m) 一 EXn Xm. 

一 般 地 ， 宽 平 稳 过 程 不 能 保证 {X(t)X(t 二 7),t € R},vT € R( 或 i op = 
0,1,2…]},vm E NU{0}) 也 是 平稳 的 ， 因 此 ， 它 们 要 成 为 协 方差 函数 各 态 历经 性 的 前 提 
假设 . 


$ 8.7 ”线性 系统 中 的 平稳 过 程 


线性 系统 是 工程 与 物理 中 最 常见 的 一 类 系统 ， 它 是 满足 县 加 原理 的 一 类 系统 ， 在 这 
种 系统 中 ， 如 果 输 入 是 一 个 平稳 过 程 ， 芒 输出 也 应 是 一 个 随机 过 程 ， 但 输出 的 随机 过 程 
是 否 也 平稳 呢 ? 输入 ,输出 之 间 的 线性 关系 (相关 性 ) 又 是 怎样 的 呢 ? 本 节 将 要 讨论 这 些 
问题 . 
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(1) 线性 系统 
一 个 系统 可 以 用 以 下 图 示 代 表 : 


Xt) | Yt) 


其 中 ， z(t). v(t) 分 别 代 表 输入 ， 输 出 量 ， 工 是 系统 的 运算 子 ， 它 表示 输入 ， 输 出 之 
间 的 运算 关系 满足 : y(t) = Llz(t)]. 

定义 ” 设 有 系统 工 , 且 yi(t) = Llz1(t)],y2(t) = L[z2(t)], 如 果 它 对 于 任意 常数 c1,c2 
满足 : 





ciy1(t) 十 cay2(t) 二 Llciz1(t) 十 c222(t)] (8.7.1) 


则 称 工 是 线性 系统 . 
定义 ” 若 系 统 工 对 任意 7 有 : 





Llz(t+7)] = y(t+7) (8.7.2) 


则 称 工 是 定常 系统 (或 时 不 变 系统 ). 
工程 中 ， 定 常 线性 系统 可 用 微分 方程 描述 ， 如 : 
dn cm 一 17 人 cm 一 ly 
n i 中 1 本 下 boy 二 Um dt™m + m1 mi 
其 中 ，n>m>0,teR. 
对 z(t), y(t) 分 别 进行 拉 普 拉 斯 变换 ， 即 : 


b 





十 .十 Co (8.7.3) 


则 8.7.3 式 变 为 : 
Y(s) = H(s)X(s) (8.7.4) 
其 中 ， 


Gms™ SR Cte 十 …… 十 ao0 
bnsn + bn_13"-1 十 .… 十 bo 


它 完全 由 系统 的 状态 特性 所 确定 ， 称 为 系统 的 传递 函数 . 记 h(t) = Cs 则 h(t) 描 
绘 了 系统 的 动态 特性 ， 称 为 线性 系统 的 脉冲 响应 函数 ， 由 8.7.4 作 拉 氏 反 变换 得 到 


H(s) = (8.7.4a) 








ee 六 oh = (8.7.5) 
人 
取 s = 各 , 则 ，(io) = /h(tje-ivtdt 是 h(t) 的 储 里 叶 变换 ， 称 为 系统 的 频率 响应 函 


数 . 
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关于 定常 线性 系统 的 内 容 , 很 多 工程 类 书籍 中 都 有 介绍 , 这 里 只 列 出 几 个 基本 概念 ， 
读者 可 以 自行 查阅 工程 类 参考 书 . 

(2) 线性 系统 输出 过 程 的 概率 特性 

以 下 讨论 的 线性 系统 的 输入 都 是 平稳 过 程 {X(t),t & RR}, 由 (8.7.5) 设 线性 系统 的 输 
出 过 程 为 : 





y(t) = z(t — Nh( Na (8.7.6) 
0 


定理 8.7.1 设 定常 线性 系统 工 的 脉冲 响应 函数 为 h(t),(t > 0). 若 输 入 {X(t),t € R} 
是 平稳 过 程 ， 且 X(t) = mx, 协 方差 函数 为 Rx (7). a Y(t) 也 是 一 个 平稳 过 
程 ， 且 





re / ~ pa 
当 mx = 0 时 ， 
Cov 六 由 二 
证 
(人 X(t — Nh 
这 [X(t 一 和 A(X)dX ”Fubini 定理 
| “ | ~ 
当 mx = 0 时 ， my = 0, 故 ， 
Ry(t.t+7) = ElY(t)Y(t + 7) 
二 中 pC 六 pe 
fa pe 
扩 划 二 


显然 ，Y(t) 的 均值 函数 与 协 方差 函数 都 与 时 间 上 无 关 ， 所 以 它 是 宽 平 稳 过 程 . 

在 (8.4) 中 我 们 已 经 介绍 了 平稳 过 程 的 协 方差 函数 的 (功率 ) 谱 分 解 ， 并 得 到 协 方差 
函数 与 谱 密度 之 间 的 傅立叶 变换 关系 ， 在 线性 系统 中 ， 我 们 把 一 个 平稳 过 程 的 协 方差 函 
数 的 伟 氏 变换 称 为 它 的 谱 密 度 函 数 ， 而 抠 旺 个 平稳 过 程 的 互 协 方差 函数 的 仿 氏 变换 称 为 
它 的 互 谱 密度 函数 . 类 似 于 平稳 过 程 的 概念 ， 当 互 协 方差 函数 不 随时 间 改 变 时 ， 称 它们 
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定理 8.7.2 ”系统 5 加 上 定理 8.7.1, 若 {X(t),t € RR} 的 谱 密度 函数 为 fx(w), 当 


fy(w)= |H(Ow)) fx(w) 





其 中 ， 五 (iw) 由 (8.7.4) 式 定 义 . 
证 : ”由 定理 8.7.1 


fy(w)= 人 Ry(T)e "dr 


二 Vi [/ Rx(M2 3 和 1 人 T)h(A)h(A2 jdAid》Xale- rd7 
二 上/ Rx( 入 2 和 1 es T)e iTqdr]h(A h(A2)dAidAs 


由 变量 置换 ， 可 知 积分 
4 Rx(M2— MrT)e “rdr= Rx (—ni)e (rita -AD gr 


fx(w)e- (NA) 


= fx( of a 万 (入 yoann h(A2)e “MN2 dX 
= fx(w)H(-iw) H(iw) = |H(iw)| fx(w) 
定理 8.7.2 给 出 了 输入 ， 输 出 过 程 的 协 方差 函数 的 健 立 叶 变 换 之 间 的 关系 . 
前 面 的 讨论 已 经 显示 , 当 定 常 线性 系统 的 输入 是 平稳 过 程 时 , 其 输出 也 是 平稳 过 程 . 
那么 这 两 个 过 程 的 线性 相关 性 随时 间 推 移 有 什么 样 的 性 质 呢 ? 
定理 8.7.3 ”系统 工 如 定理 8.7.1 所 示 ， 若 输入 {X(t),t E R} 是 平稳 过 程 ， 则 它 与 输 
出 过 程 是 平稳 相关 的 ， 且 当 mx = my = 0 时 ， 互 协 方差 函数 和 互 谱 密 度 函 数 分 别 为 : 


Rxy (7T) = Rx(T— Mh(A)AA 





fxr(w)= fx(w)H(iv) 


Rxy (t,t+7) = EIX(OY(t+7) = EIX() a X(t 4 7 Mh)AN 
0 
= /| Ex()x — MO) 
[X(t)X(t+7T 2 (和 A) 


人 Rx(T 二 A)h(A)aA 
0 


8.7 ”线性 系统 中 的 平稳 过 程 


a ye a RF a] 
0 
= FIRx(T)FIRN))] = fx (w)FIR(A) 
= 


例 1 上 一 市 中 所 介绍 的 ARMA 模型 就 是 一 种 定常 线性 系统 . 
例 2 设 定常 系统 的 输入 ， 输 出 微分 方程 为 : 


1 
了 2 (0) + Y(t) = 20t) 


则 取 £- 变换 有 : Y(s) = ;和民 (9), 故 吾 (s) = -各 因此， 脉 串 响应 函数 为 : 








0 
0, t<0 


| 


频率 响应 函数 为 : H(iw) = 7 

若 输入 平稳 过 程 X(t) 满足 ，mx = 0,Rx(7) = o?e- ?rl,bp > 0 且 5 关 a. 则 由 定理 
8.7.1 易 知 ， 输 出 过 程 的 数学 期 望 my = EY(t) = 0. 而 输出 过 程 的 协 方差 函数 有 两 种 求 
法 : 

(1) 利用 定理 8.7.1 





oo oo 
mn)= | / ge 中 和 Az 一 1 rlau2e TM) AIA dM 
0 0 


解 二 重 积分 (并 利用 Ry(7) 的 偶 函 数 性 质 ) 可 得 : 


2 
ee 一 中 7| 


2 [ae 一 be-elrl]， 一 2o6 <T < 十 co 
三 


Ry(7T) = 





(2) 利用 定理 8.7.2 由 fx(w) = FF[Rx(7)] = 2bo0?/(P +w?), IH(iw)h = 02/(w? + a?), 








故 : 让 
a2 2ba 
fr) = a ato 
由 此 可 得 : 
CGI2 | 一 
Ry(7)= £7![fy(w)] = i [ae-?sll bel -x%<T<+% 


可 见 ,两 种 方法 殊途同归 . 不 过 后 者 由 于 计算 往往 更 为 简便 ， 故 在 工程 中 更 多 的 被 采用 - 
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第 八 章 。 宽 平稳 过 程 


练习 题 


8.1 设 随机 电报 信号 过 程 {X(t),t E R} 只 取 +1 和 一 1 两 个 状态 , 且 vi € R, P(X(t)= 
1) = P(X(t) = 一 1) = 1/2. 记 X(t) 在 (s,s 十 相 上 符号 改变 的 次 数 为 N(s+t) 一 N(s) = 
AN(s,s+ti, 设 它 是 参数 为 jt 的 Poisson 分 布 ， 试 证 : {XX(),t € R} 是 宽 平 稳 过 程 ， 并 
求 出 其 相关 系数 p(7) 及 其 功率 谱 密 度 . 

8.2 设 1 人, € RR} 为 平稳 过 程 ， BX(t) = 0， px(7) 为 其 相关 函数 ， 令 Y(t) = 

”> 试 证 {Y(1),te 本 为 宽 平稳 过 程 ， 求 其 相关 函数 py(7). 

—1 X(t)<0 

8.3 设 {£(), 入 € RR} 是 正 交 增 量 过 程 . Bt( 和 ) = 0， ) 一 0D = Xz 一 和 1. 试 证 
X(t) = &(t) 一 &(t 一 1) 为 平稳 过 程 , 求 其 px. R(T) 与 fx(7 

84 设 {X(),t e | 为 均 方 连续 平稳 过 程 ， Be FO) Wh > 0 记 h(nh) 
试 证 {[X;,ne 2} 是 平稳 序列 .试用 /(^) 表示 {Xne 2] 的 谱 密 度 . 

8.5 试 求 平稳 序列 [X,,n E 2] 的 相关 系数 p(7) 及 谱 密 度 fx (), 若 大 满足 : 

1) AR(1):Xn, 二 aaX 1 一 上 国志 二 

2) AR(2): Xn 二 41Xn_1 十 G2Xn_2 二 &x; 其 中 ， a(z) = 1 十 az 十 4a2z? 的 根 在 单位 圆 
外 

3) ARMA(LI:XH Ta = 名 二 De lad<ilbl<1. 

8.6 设 平稳 过 程 {X(t),t € R} 满足 下 列 方程 : 

1) dX(t) +aX(t) = dB(t) a > 0; 

2) X(t)+ar X(t)+as X(t) = dB(t) /dt,a(z) = 22+a1z+a2 = (z+o1)(z+ oa) Ci > 
0,ai Qe2. 

试 求 px (7) 及 fx( 和 ). 

8.7 试 求 下 列 线性 模型 中 X,, 的 显示 表达 式 及 格林 传递 函数 . 

1) X, — 0.6Xn 1 = én; 

2) XK, + 0.1X, 1 — 0.56X, 2 = én: 

3) Xn 一 1.4Xn 1 十 0.49X = én; 

4) 瑟 ， 十 0.3 开 1 一 名 一 0.4 

5) KX, — 1.6 和 1 + 0.63X, 2 = én 十 0.56， 1 

8.8 设 AR(2) 模型 为 了, 一 24aXh_1 十 a?X_2 二 x, 其 中 |a|<1. 

1) 试 证 X 的 显示 表达 式 (传递 形式 ) 为 : 


Do 











(十 1 各- k 
b= 


2) 试 求 有 一 1.2Xn_1 十 0.36X > = én 的 pxX(7). 


练习 题 


提示 : 7 > 0 时 ， p(7) 是 差分 方程 plr) - 1.2p(r 一 1) 十 0. 2 一 2) = 0 的 解 ， 其 一 
般 解 为 : p(7) = C10.6" + C27(0.6)”, 再 利用 的 二 1,p(1) = p( 一 1) 定 出 系数 C1, C2.] 

8.9 已 知 AR(2) 模型 X,, -1.6X 1 十 0.64X 3 = én， & ~ N(0,a2) 是 正 态 
了 噪声， 已 知 观察 值 X1,… ,X;, 求 ! 步 最 佳 均 方 预测 值 如 + 和 预测 均 方 误差 ， 

8.10 设 {X,n > 0} 为 宽 平稳 序列 ， BX = 0, 其 协 方差 R(7) 已 知 

1) 若 取 庆 ,41(1) = aX 作为 X,+1 的 估计 (或 预测 ), 试 求 其 最 佳 线性 均 方 估计 ， 并 
求 相应 的 均 方 误差 A, = 已 (Xi 一 总 1)2. 

2) 若 取 图,41(2) = bX ci 作为 X41 的 估计 ， 试 确定 b,c 使 姜 ,41(2) 是 和 + 
的 最 佳 均 方 估计 . 

8.11 { 嫩 >0 同 题 8.10. 若 XXntw 已 知 而 Xn+r,(1 < < NWN) 丢失 ,试用 
XXXn+x 的 线性 函数 证 = aXh 十 DXntN 作为 X44 的 最 佳 均 方 估计 (内 揪 ), 试 确定 
a,b. 

8.12 (线性 滤波 问题 ) {X,n > 0} 为 平稳 序列 ， BX = 0, 其 协 方差 R(7) 已 知 ， 
设 X, 为 系统 在 n 时 刻 的 状态 (不 能 观测 ), 其 观测 值 包 含 白 噪声 ， 即 2Z, = X + ec, 其 
中 {é&4,n > 0} 为 白 品 声 序列 ， 且 与 {Xn,n > 0} 不 相关 ， BEE = 0,Btnx = o?. 试用 
六 ,= a2 十 2-1 作为 X, 的 估计 ， 试 求 其 最 佳 均 方 估 计 (滤波 ). 

8.13 随机 过 程 





X(t)= Asint+i+ Bceost, 一 co <t 上 < 十 2 


其 中 ， 4,B 是 均值 为 0 且 不 相关 的 随机 变量 ， 且 B4? = BB?. 试 讨论 X(t) 的 各 态 历经 
性 . 
8.14 设 平稳 过 程 {X(t), 一 2% <t< +20},.EX(t) = 0,R(7) = he-“l7(1 十 al7|), 其 中 ， 
4,a 是 正常 数 . 试问 X(t ee 
8.15 设 {X(t),-% <t< 二 x} 和 {Y(t),-x <t < +%} 是 平稳 相关 随机 过 程 ， 若 
t) 满足 : 
Y(t)+aY(t) = X(t) 


其 中 ，4a 是 非 零 常数 . 试 证 : wry = imx. 
8.16 均值 为 零 的 平稳 过 程 {X(t), 一 2o < t < +%o}, 输入 到 脉冲 响应 函数 为 
ae-t 0<t<T (a > 0) 
0 其 它 
的 线性 滤波 器 ， 试 证 它 的 输出 功率 谱 密 度 为 : 


2 


fy(w)= (1 -WB8 "T cos wT +e Tt)fx(w) 


a 二 +w? 


其 中 ， 大 (wo) 是 X(t) 的 谱 密度 函数 . 
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8.17 设 {Xn,n € 2} 是 满足 方程 AR: 一 aXn-1 = & 的 平稳 解 . (其 中 lal < 1， 
{&n,n E21} 为 白 噪声 序列 ), 试用 X, Xn-1 的 线性 函数 作为 X,+1 的 估计 . 试 求 其 最 佳 线 
性 均 方 预测 ， 

8.18 设 {Xn,n € 2Z} 为 平稳 序列 ， 相 关 函 数 为 p(7) 及 其 功率 谱 函 数 为 F( 和 ), 和 E 
[7,7]. 试用 XX,_1,… ,Xn_y 的 线性 函数 对 = 5 4_1 cxXn_x 作为 X 的 预测 ， 则 它 是 
最 佳 线 性 均 方 预测 的 充 要 条 件 是 满足 以 下 方程 组 : 


co p 
/ eikX 下 二 》 oe 
一 co 


直流 





dF(N)=0. 大 二 1.2, ,7 


8.19 设 {én,n>0),iid. Bé =0.B62 = {Xn,n>0) 满足 : X= Dro antnn, 
其 中 ，ao = 1 < Too 记 UVn = Doo Xr-ite Va = Do Xrétr (n+1)o n> 0. 
试 证 {Vn.n> 0 及 {WW,n>0} 关 于 {&,n > 0} 是 团 . 

8.20 设 Xo 的 p.dt. 是 f(z) = 2z16>0), 对 n> 1 给 定 X0,… ,Xn,Xnti 是 (1 一 Xn,1] 
上 的 均匀 分 布 . 试 证 : {X,,n > 0} 是 满足 期 刻 各 态 历经 定理 的 平稳 过 程 . 

8.21 设 Xo = 2 ~ UI0, 1).Xa41 = 2 Tc 十 (2 1) Taxi) 

1) 试 证 : {Xn,n > 0} 是 平稳 序列 ， 

2) 若 Z 用 二 进 制 小 数 表示 ,， 即 2 = Ro2-W+02i = 0.Zo212s.…, 其 中 24 取 值 0 
或 1, 试 证 X, = 0.22041 

3) 利用 ergodic 定理 ， 证 明 : 


TS 1 
i， 之 RFI- a 
im 2 多 小生 3 .8. 


其 中 {x} 表 > 的 小 数 部 分 ， 即 {x} = x 一 [z],[z] 表 不 超过 x 的 最 大 整数 . 

8.22 设 {ww,.n > 0} 是 平稳 序列 ， By, = 0,R(0) = 二 1,R(7)=p,r 关 00<p<l 证 
明 : 7 必 可 表 为 加 = 三 + 各 > 1, 其 中 X,&1,&2,… 不 相关 ,， EX = Bé, = 0, 且 
EX?=p 及 EF=1-pk>1. 

[提示 : 定义 对 "和 = lim ,x (Dr Er/n).] 

8.23 设 X(t) 是 雷达 发 射 的 信号 , 遇 到 目标 后 的 回 波 信号 是 aX(t 一 5), a < 1,2 是 信号 
往返 时 间 , 而 回 波 必 伴 有 噪声 , 记 为 E(t), 于 是 接收 机 收 到 的 信号 为 Y(t) = aX(t-b)++&(t). 
已 知 EX(t) = mx, Rx(T), BE(t) = 0, Re(7). 且 X(t) 和 &(t) 平稳 相关 Rxe(7)， 试 求 
(),Y(t) 的 互相 关 函 数 Rxy (7). 

8.24 设 E(t) = 和 cos(nt+6), 其 中 9 ~ VI0,27],X 与 9 相互 独立 取 值 为 正 , 且 BX? < =， 
7 > 0 为 常数 ， 试 证 {E(t). 一 2 <t < +oo} 为 宽 平 稳 过 程 . 

8.25 设 2(t) = cos(tX+Y), 其 中 >0 为 常 葵 XX 取 值 在 [0,1/2] 上 具有 p.df.fx(:)， 
Y ~U[-1/2,1/2] 且 与 X 独立 . 

1) 试 证 {2(t),t > 0} 是 宽 平稳 过 程 ; 





练习 题 


2) 求 它 的 功率 谱 密度 函数 . 


8.26 设 {Xi(), 一 x <t<+cc}, (1 <i < 3) 为 宽 平 稳 过 程 ， 其 协 方 差 函 数 分 别 为 : 
1) R(T) = o?2e-°l"l(1 + |7)); a>0,>0 

2) R(T) = oa2e-olrlcos Bt; Q > 0,B > 0 为 常数 

3) R(T) = eelrl(l 二 alr| +(ar)273): Ga > 0， 

斌 分别 求 其 功率 谱 密度 函数 . 
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